Збій у системі моніторингу хлору в готелі поблизу парку розваг Phantasialand у Німеччині призвів до надмірної концентрації цієї речовини у воді басейну. За інформацією німецького мовника WDR, попередження не дійшли до персоналу парку через масштабний збій Microsoft 365, а 15 людей постраждали.

Як збій Microsoft 365 вплинув на сповіщення
Система мала автоматично надсилати працівникам парку електронні повідомлення про небезпечні показники. Однак саме в цей час Microsoft 365 переживав масштабний збій, тож сповіщення так і не дійшли до персоналу.
Проблему помітили лише тоді, коли відвідувачі почали скаржитися на погане самопочуття. За даними пожежної служби, на місце події направили близько 40 рятувальників. Медики оглянули 15 постраждалих із подразненням дихальних шляхів, а чотирьох із них доправили до лікарні.
Цей випадок показав, що перебої в роботі цифрових сервісів можуть мати наслідки далеко за межами офісної роботи. Якщо електронна пошта використовується для передавання критично важливих попереджень, її недоступність може впливати на безпеку людей.
Що спричинило збій Microsoft 365
Після відновлення роботи сервісів Microsoft опублікувала звіт про інцидент у центрі адміністрування Microsoft 365. Компанія пояснила, що причиною стала комбінація кількох технічних проблем, а не кібератака. У звіті виділили три основні чинники: прихована помилка в програмному забезпеченні, яка з’явилася ще в липні та згодом призвела до перевантаження серверів Windows; проблеми з Microsoft Teams, збій у яких збільшив навантаження на інфраструктуру, спільну з Microsoft Exchange; і недостатня серверна потужність, адже на момент інциденту 14% потужностей мережевої системи не працювали.
Окремо кожна з цих проблем не мала спричинити глобальний збій. Їхнє одночасне виникнення створило надмірне навантаження на інфраструктуру Microsoft. Запити до серверів почали накопичуватися, доки обладнання не перестало відповідати. Найбільше проблем виникло під час пікового періоду навантаження у США.
Чому відновлення затяглося
Для стабілізації роботи Microsoft автоматично перенаправляла трафік на сервери, які ще функціонували. Це створювало додаткове навантаження на справні вузли, і вони також почали стикатися з початковою помилкою. Компанія описала цей процес як «каскадний збій», коли несправність поширюється від одного сервера до іншого через перерозподіл навантаження. У найгірший момент до 80% доступних серверів перестали відповідати.
Додатковою проблемою стало те, що механізми захисту від подібних каскадних збоїв не спрацювали належним чином. Навіть після відновлення окремі сервери знову перевантажувалися через накопичені запити.
Звичайного повернення до попередньої версії програмного забезпечення було недостатньо, оскільки помилка існувала ще з липня. Для остаточного виправлення Microsoft повернула програмний код до попереднього стабільного стану, поступово вивела сервери з роботи, розгорнула виправлення та перезапустила інфраструктуру.
Зрештою компанії вдалося відновити роботу сервісів. Однак інцидент у Німеччині показав, наскільки важливо мати альтернативні канали оповіщення. Системи безпеки, від яких залежить здоров’я людей, не повинні покладатися лише на доступність електронної пошти або одного хмарного сервісу.
Джерело: 24tv.ua

2906