Microsoft: глобальный сбой Microsoft 365 вызвала ошибка, появившаяся еще в июле

2026-11-17 104 комментарии
В предварительном отчете Microsoft объяснила сбой Microsoft 365 12–13 ноября: ошибка июльского обновления серверов сетевых шлюзов проявилась после переключения Teams и вывела из строя более 80% этих серверов, а Exchange Online не смог переключиться на резервную инфраструктуру

Microsoft сообщила, что причиной глобального сбоя Microsoft 365 на прошлой неделе стала программная ошибка, появившаяся в июле. Она запустила цепную реакцию, из-за которой более 80% серверов сетевых шлюзов перестали отвечать на запросы.

Страница состояния сервисов Microsoft: Microsoft 365 (Business or Enterprise) – Service degradation, пользователи могут не подключиться к нескольким сервисам Microsoft 365, у Exchange Online нет доступа к почтовым ящикамСтраница состояния сервисов Microsoft утром 13 ноября. Изображение: Comss.ru

Сбой 12 ноября продолжался почти сутки и нарушил работу сервисов Microsoft 365 по всему миру, включая Outlook, Exchange Online, Teams и Copilot. Пользователи не могли получить доступ к почте, а сообщения доставлялись со значительными задержками.

В предварительном отчете об инциденте, опубликованном в центре администрирования Microsoft 365, компания назвала три причины произошедшего:

  • ранее не обнаруженную программную ошибку;
  • рост трафика после переключения Microsoft Teams на резервную инфраструктуру;
  • сокращение доступных серверных мощностей.

Инцидент начался в четверг, 12 ноября, в 11:20 по восточному времени США и продолжался до 11:10 следующего дня, когда Microsoft подтвердила полное восстановление сервисов.

Почему тестирование не выявило ошибку

По данным Microsoft, ошибка появилась в июле в обновлении для серверов сетевых шлюзов Microsoft 365.

Обновление более трех месяцев работало без проблем. Однако при определенных условиях трафика ошибка могла приводить к перегрузке серверов, после чего они переставали отвечать на запросы.

Microsoft объяснила, что не обнаружила проблему при тестировании обновления, поскольку использовала менее мощное оборудование, чем в рабочей инфраструктуре.

В предварительном отчете:

Наши стандартные нагрузочные тесты не выявили скрытую проблему из-за характера трафика и конфигураций оборудования, использовавшихся в лабораториях.

Проблема конкуренции за ресурсы сильнее проявляется на более новом оборудовании с большим числом ядер, тогда как при нагрузочном тестировании мы в основном использовали менее мощное оборудование с меньшим числом ядер.

Как сбой распространился по всему миру

Ошибка проявилась после того, как примерно за 15 часов до начала сбоя Microsoft Teams автоматически переключилась на сетевую инфраструктуру Exchange Online. Это увеличило нагрузку на обслуживающие ее серверы.

Ранее в тот же день в Microsoft Teams произошел отдельный сбой, однако пока неизвестно, связаны ли эти два инцидента.

Ситуацию усугубило то, что почти 14% серверных мощностей сетевых шлюзов уже были недоступны из-за другой проблемы. Оставшихся ресурсов было достаточно для работы инфраструктуры, но сочетание возросшего трафика и сокращенной мощности привело к проявлению программной ошибки.

Когда серверы переставали отвечать, системы Microsoft перенаправляли пользователей на другие доступные серверы. Те тоже не справлялись с дополнительным трафиком и выходили из строя.

Microsoft пояснила:

Менее чем за два часа ранее неизвестный дефект проявился во всем парке серверов, из-за чего они перестали отвечать. В пике недоступны были более 80% серверов.

Защитные механизмы, которые должны были предотвращать распространение проблем между регионами, также не смогли остановить цепную реакцию. В результате сбой затронул пользователей по всему миру.

Другие сервисы Microsoft 365, включая Teams, OneDrive и SharePoint, смогли переключиться на альтернативную инфраструктуру и восстановить работу раньше. Для Exchange Online такое переключение оказалось недоступно, поэтому пользователи по-прежнему не могли открыть свои почтовые ящики.

Как Microsoft восстановила работу сервисов

Восстановление осложнялось тем, что после перезапуска пострадавшие серверы быстро перегружались снова из-за накопившегося трафика.

Выявив ошибку, инженеры Microsoft подготовили исправление и развернули его на затронутых серверах. В течение пятницы работа сервисов постепенно стабилизировалась.

Microsoft подтвердила, что к 11:10 по восточному времени США 13 ноября сбой перестал влиять на клиентов.

Компания сообщила, что после инцидента увеличила доступные мощности, улучшила мониторинг и добавила защитные механизмы, которые должны предотвращать подобные цепные отказы при перенаправлении трафика.

В отдельном заявлении в X исполнительный вице-президент Microsoft по направлению Copilot, агентов и платформы Чарльз Ламанна (Charles Lamanna) извинился за произошедшее.

Ламанна заявил:

Мы приносим глубокие извинения всем нашим клиентам и понимаем, как этот сбой повлиял на их повседневную работу и бизнес-процессы.

Расследование продолжается. Microsoft планирует опубликовать окончательный отчет об инциденте позже на этой неделе.

Читаете нас в Google? Добавьте Comss.ru в источникиДобавьте Comss.ru в источники Google
Новые статьи будут чаще в «Главных новостях» Google. Без подписок и уведомлений, отключается в один клик. Нужен вход в аккаунт Google.Наши статьи будут чаще в «Главных новостях». Нужен вход в Google.
Добавить в Google
© .
Комментарии и отзывы

Нашли ошибку?

Новое на сайте