Новый сбой в сервисах Яндекса: дата-центр во Владимире остановлен, зона ru-central1-a недоступна

495 комментарии
В ночь на 11 октября остановлен дата-центр «Яндекса» во Владимире, и вслед за ru-central1-b недоступной стала зона ru-central1-a. Yandex Cloud работает в аварийном режиме: виртуальные машины доступны только в зонах ru-central1-d и ru-central1-e

В ночь на Yandex Cloud сообщил о перебоях с электропитанием в зоне доступности ru-central1-a. На странице инцидента начало сбоя указано в 04:00 МСК, первое сообщение появилось в 04:11. Зона отмечена статусом Unavailable, в список затронутых включены 84 сервиса.

В 06:08 МСК компания назвала причину: в результате атаки БПЛА повреждена инфраструктура дата-центра «Яндекса» во Владимире, его работа полностью остановлена. Пострадавших нет, на месте работают профильные службы. Это третья площадка компании, пострадавшая за четыре дня, – после Сасово и Калуги.

Платформа работает в аварийном режиме

Карточка инцидента ru-central1-a на странице статуса Yandex Cloud: статус Unavailable и список из 84 сервисов
Карточка инцидента: зона ru-central1-a недоступна с 04:00 МСК. Изображение: Comss.ru
Первое сообщение Yandex Cloud о перебоях с электропитанием в зоне ru-central1-a в 04:11 МСК
Первое сообщение об инциденте в 04:11 МСК. Изображение: Comss.ru

Вместе с ru-central1-b, которая не работает с 8 октября, недоступны уже две зоны. В 06:11 МСК Yandex Cloud сообщил, что платформа работает в аварийном режиме, и описал состояние отдельных компонентов. Консоль, API и сервис управления доступом IAM работают. Виртуальные машины Compute Cloud доступны только в зонах ru-central1-d и ru-central1-e. Большинство отказоустойчивых кластеров управляемых баз данных переключились, но часть может работать только на чтение или быть недоступна. Object Storage доступен на чтение, при записи возможны проблемы. Состояние региональных кластеров Managed Service for Kubernetes компания ещё оценивает, остальные сервисы могут работать с перебоями.

Обновления Yandex Cloud от 11 октября: в 06:08 о повреждении дата-центра во Владимире, в 06:11 об аварийном режиме платформы
Обновления на странице инцидента в 06:08 и 06:11 МСК. Изображение: Comss.ru

Оставшуюся конфигурацию ресурсов в Yandex Cloud считают неустойчивой и рекомендуют клиентам задействовать любые альтернативные планы аварийного восстановления, в том числе на внешних площадках. Связь с технической поддержкой может работать нестабильно, а сведения на странице статуса появляются с задержкой.

Зона доступности – обособленная часть облачной инфраструктуры, которую проектируют с учётом изоляции от сбоев в других зонах. Размещение компонентов приложения в нескольких зонах снижает зависимость от одной площадки, но требует подходящей настройки резервирования и переключения нагрузки.

Какие сервисы указаны в карточке инцидента

Список охватывает вычислительные ресурсы, сети, хранилище, управляемые базы данных, инструменты разработки и ИИ-сервисы. В нём также присутствуют консоль управления, биллинг и центр поддержки. Ниже приведены все 84 позиции, сгруппированные по назначению.

ГруппаСервисы
Вычисления, хранение и сеть Compute Cloud, Virtual Private Cloud, Object Storage, Network Load Balancer, Application Load Balancer, Cloud Interconnect, Cloud DNS, Cloud CDN, Yandex BareMetal, Cloud Desktop, Cloud Backup, Yandex Cloud Router
Разработка и бессерверные приложения Container Registry, Managed Service for Kubernetes®, Cloud Functions, API Gateway, Serverless Containers, Managed Service for GitLab, Cloud Apps, SourceCraft Code Assistant, Cloud Registry, Marketplace, SourceCraft, Stackland, VibeCraft
Управляемые базы данных Managed Service for PostgreSQL, Managed Service for ClickHouse®, Yandex StoreDoc, Managed Service for MySQL®, Managed Service for Valkey™, Managed Service for YDB, Managed Service for Apache Kafka®, Managed Service for OpenSearch, Managed Service for YTsaurus, Managed Service for Sharded PostgreSQL
Обработка данных и аналитика Data Processing, Message Queue, DataLens, IoT Core, Data Transfer, DataSphere, Yandex MPP Analytics Engine for PostgreSQL, Data Streams, Yandex Query, Yandex WebSQL, Yandex Managed Service for Apache Airflow®, Yandex MetaData Hub, Yandex Managed Service for Trino, Managed Service for Apache Spark™
ИИ и обработка речи SpeechKit, Translate, Vision OCR, Yandex Search API, YandexGPT API, SpeechSense, Yandex Neurosupport, Yandex AI Studio
Доступ и безопасность Identity and Access Management, Key Management Service, Certificate Manager, Yandex Lockbox, Yandex Identity Hub, Audit Trails, SmartCaptcha, Smart Web Security, Security Deck, Yandex Cloud Detection and Response, GOST Gateway, Yandex SIEM
Управление, мониторинг и совместная работа Resource Manager, Monitoring, Tracker, Cloud Logging, Forms, Wiki, Yandex Cloud Console, Yandex Cloud Billing, Yandex Cloud Postbox, Support Center, Cloud Notification Service, Yandex Cloud Quota Manager, Monium, Managed Service for Prometheus®, Yandex Cloud Video

Включение сервиса в карточку инцидента не означает, что все его функции недоступны каждому пользователю во всех зонах. Состояние ключевых компонентов компания описала отдельно, в обновлении от 06:11.

Перебои заметны и в пользовательских сервисах «Яндекса». Утром 11 октября на detector404.ru отмечены жалобы на Яндекс Телемост, Яндекс Go, Яндекс Пэй, «Дом с Алисой», Яндекс Музыку, Яндекс Еду и Яндекс Про. Перебои могли затронуть и сторонние площадки, использующие инфраструктуру Yandex Cloud.

Яндекс Телемост не загружается: в браузере крутится индикатор и сообщение о повторной попытке подключения
Телемост не подключается к серверу. Изображение: Comss.ru

Зона ru-central1-b остаётся недоступной четвёртые сутки

Новый сбой произошёл на фоне продолжающегося инцидента в ru-central1-b. Зона, которую обслуживал остановленный после пожара дата-центр в Сасово, недоступна с ночи 8 октября. В ночь на 9 октября несколько модулей вышли из строя и в дата-центре в Калуге.

В обновлении от 10 октября, 20:13 МСК Yandex Cloud подтвердил, что ru-central1-b не восстановлена. С утра 10 октября компания перешла на полностью ручное управление квотами на вычислительные ресурсы и диски: техническая поддержка разбирает каждую заявку отдельно, поэтому ответы могут приходить с задержкой. На выходные всем пользователям выделен небольшой дополнительный объём ресурсов сверх уже используемых – например, для восстановления из резервных копий и переноса на другие площадки. Создание новых ресурсов сверх лимитов ограничено, а расширять их в первую очередь будут клиентам, чьи критичные сервисы ещё не восстановлены.

Следующее обновление по ru-central1-b обещано 11 октября в 12:00 МСК. Сроки восстановления ни одной из двух зон компания не называет.

Автор:
Комментарии и отзывы

Нашли ошибку?

Новое на сайте