Повторные удары БПЛА по дата-центрам «Яндекса» вывели из строя владимирскую площадку и вызвали веерные отключения в рунете

52 минуты назад

© Сгенерировано ИИ

Серия атак беспилотников на объекты «Яндекса» привела к масштабному кризису в сетевой инфраструктуре. В ночь на воскресенье, 11 октября, произошел третий за четыре дня инцидент: в 04:12 мск зафиксировано обесточивание зоны доступности ru-central1-a из-за прямого попадания БПЛА по дата-центру во Владимире. По данным профильных ресурсов мониторинга сетевых сбоев Сбой.рф, массовые проблемы с доступом затронули платформы по всей стране. С учетом ранее поврежденных площадок в Сасово Рязанской области и Грабцево Калужской области IT-гигант потерял три из пяти своих ключевых ЦОД в Центральной России. Компания перевела платформу Yandex Cloud в аварийный режим, признав оставшиеся мощности неустойчивыми.

Веерные перебои в B2B-сегменте, транспортном секторе, ритейле

Поскольку владимирский объект обеспечивал работу облачных систем и ключевых маршрутизаторов, его остановка спровоцировала волну сбоев в сторонних сервисах по всей стране и за её пределами.

- Ритейл и общепит: Проблемы с оформлением заказов, проведением транзакций и авторизацией зафиксировали сети «Вкусно — и точка», KFC, «Додо Пицца», маркетплейс Lamoda, торговые сети «Пятерочка», «Магнит», «Лента», а также цветочный сервис Flowwow.

- Транспортная инфраструктура: Сбои затронули сайт и онлайн-табло петербургского аэропорта Пулково (пользователей автоматически перенаправляли на агрегаторы авиабилетов), портал Sports.ru и региональные ресурсы интернет-провайдера «Дом.ру».

- Медицинские цифровые сервисы: О неполадках сообщила компания Sinocare, поставляющая системы онлайн-мониторинга уровня глюкозы в крови для диабетиков.

- Сервисы экосистемы: Нарушения затронули «Яндекс Пэй», «Яндекс Игры», «Кинопоиск», «Яндекс Музыку», систему «Дом с Алисой», а также службы вызова такси («Яндекс Go»). Проблемы с заказом автомобилей фиксировались у пользователей в Армении, Беларуси, Грузии, Казахстане и Сербии. На «Яндекс Картах» временно перестало отображаться движение общественного транспорта в реальном времени.

Выход из строя трех суперкомпьютеров, угроза обучения ИИ-моделей

По данным профильных каналов, кумулятивный ущерб от поражения трех площадок затронул все три суперкомпьютера «Яндекса», задействованных в обучении нейросетей, включая YandexGPT.

На объекте в Сасово находились высокопроизводительные вычислительные комплексы «Червоненкис» (самый мощный суперкомпьютер России за последние 15 лет) и «Ляпунов». В калужском ЦОД размещался суперкомпьютер «Галушкин». Потеря доступа к этим вычислительным узлам фактически замораживает процесс обучения сложных ИИ-моделей и требует пересчета ресурсов на оставшихся мощностях.

Проблемы аварийного восстановления, оценка экспертов ICL Services

Задержка с запуском дублирующих сервисов у B2B-клиентов Yandex Cloud наглядно показала, что наличие резервной площадки автоматически не гарантирует мгновенное возобновление работы.

Заместитель руководителя направления по инфраструктурным решениям и услугам ICL Services Иван Синёв объяснил RUБЕЖ, почему переключение между дата-центрами занимает часы даже у подготовленных компаний:

«Помимо наличия реплик инфраструктуры, ее требуется корректно запустить. При отказе основного ЦОД необходимо разорвать репликацию, сделать резервную базу основной, развернуть приложения, балансировщики и веб-сайты. На практике меняются IP-адреса, перестраиваются маршруты, сбиваются сертификаты и состояния СХД. Многое дает сбой из-за отсутствия регулярных тестов или устаревших инструкций.

 

Сервисы всегда делят по степени критичности. На отказоустойчивость самых важных тратится на порядок больше ресурсов, а менее критичные системы в условиях аварии могут "полежать" — для компании бывает проще создать их заново, чем расходовать драгоценные мощности на репликацию».

По словам эксперта, при резервировании компании чаще всего допускают ошибки на уровне каскадных зависимостей: от дефицита вычислительных ресурсов и виртуальных сетей (K8S) до изменения сетевых конфигураций и человеческого фактора. Главной проблемой остается отсутствие четкого регламента: кто в момент аварии принимает решение о переключении и общается со стейкхолдерами.

Иван Синёв подчеркивает, что для проверки готовности к недоступности ЦОД каждая организация должна иметь и регулярно актуализировать план аварийного восстановления (Disaster Recovery Plan):

«План DRP должен включать реестр критичных систем, карту коммуникаций, распределение ролей в антикризисном борде, пошаговые инструкции для инженерных команд и регламент тестирования после восстановления. Подобные сценарии обязательны к отработке на практике не реже одного раза в год».

Чрезвычайный режим Yandex Cloud, кооперация с VK Cloud, Selectel, K2Cloud

В условиях потери трех площадок Yandex Cloud приостановил выдачу новых квот на облачные ресурсы, ограничил работу некоторых фоновых функций (включая «Яндекс Диск») и призвал всех B2B-клиентов немедленно задействовать сторонние планы аварийного восстановления (Disaster Recovery).

Для экстренной миграции данных «Яндекс» заключил прямое соглашение с конкурентами — облачными провайдерами VK Cloud, Selectel и K2Cloud. Операторы выделили специальные инженерные группы, упростили процедуру подключения и предоставили льготные финансовые условия для переноса критических сервисов пострадавших B2B-клиентов на свои независимые мощности.

Из-за кратного роста нагрузки каналы технической поддержки «Яндекса» работали с задержками, в связи с чем пользователям рекомендовали обращаться через официальные аккаунты сервисов в социальных сетях. К вечеру 11 октября инженеры компании начали поэтапно восстанавливать работу приоритетных массовых сервисов («Алиса», Поиск, Карты, Такси, Почта), однако полная стабилизация инфраструктуры пока не достигнута.

Реакция рынка, падение стоимости ценных бумаг

Последовательное уничтожение инфраструктурных объектов привело к падению капитализации компании. За период с 7 по 11 октября стоимость акций «Яндекса» опустилась с пиковых ₽3734,5 до ₽3309,5 за бумагу (падая на отдельных отрезках торгов более чем на 4% за сессию). Совокупное снижение котировок IT-гиганта за последний месяц составило порядка 11%. Аналитики допускают сохранение негативной динамики до момента, пока компания не представит четкий план восстановления разрушенных ЦОД и компенсации выбывших мощностей.

Читайте также: Повторный удар БПЛА по инфраструктуре «Яндекса» вывел из строя дата-центр в Калуге