Три удара за четыре дня

«Яндекс» ликвидирует самый тяжелый сбой сервисов в своей истории

«Яндекс» перешел в аварийный режим и возвращает сервисы поэтапно – в первую очередь те, которыми пользуется больше всего людей: «Алису», «Поиск», «Карты», «Такси», «Почту». Второстепенные функции сознательно ограничиваются ради устойчивости ядра – 11 октября компания урезала часть функций «Диска», чтобы высвободить ресурсы для критичных сервисов. Облачная платформа по-прежнему работает в ограниченном режиме, инженеры трудятся круглосуточно, техподдержка переведена в усиленный режим.

Постепенно возвращается и «Яндекс Пэй»: оплата картами уже доступна, хотя система остается нестабильной, а для действующих клиентов временно повышена ставка по накопительным счетам – маленький, но понятный жест компенсации за доставленные неудобства.

Неделя, которая началась с пожара в рязанской глубинке, стала для российского интернета серьезным стресс-тестом и проверкой на прочность. В ночь на восьмое октября беспилотники атаковали дата-центр «Яндекса» в Сасове – на площадке начался пожар и работу объекта пришлось полностью остановить. На следующий день удар пришелся по калужскому дата-центру, где вышли из строя несколько модулей. А одиннадцатого октября, в воскресенье, был поврежден крупнейший объект компании – площадка во Владимире, обслуживавшая зону облачной платформы Yandex* Cloud: утром в четыре двенадцать канал оповещения зафиксировал нарушение электропитания, к пяти часам – атаку БПЛА, и центр обработки данных остановился целиком. Возник пожар, отключились две подстанции, от которых электроэнергию получали пять тысяч жителей, – но, к счастью, обошлось без пострадавших, и уже к утру энергетики вернули районам свет и тепло.

За четыре дня из строя выведены три из пяти дата-центров компании, два из которых отраслевые эксперты относят к числу крупнейших по производительности в мире.

Последствия проявились в считаные часы и докатились далеко за пределы самой компании. Замолчала «Алиса», с перебоями заработали «Поиск», «Карты», «Кинопоиск», «Яндекс Музыка», «Яндекс Еда» и почта; «облако» лишилось двух зон доступности, а вместе с ним споткнулись тысячи сторонних бизнесов – от сетевых супермаркетов и служб доставки до банков, билетных сервисов и государственной ветеринарной системы.

Перебои коснулись не только России: пользователи в Казахстане, Киргизии, Сербии и Армении также ощутили деградацию привычных сервисов. Отдельную тревогу вызвала ситуация с «Яндекс Пэй» – люди боялись за свои деньги, и финтех-руководитель компании Дмитрий Пирогов выступил с публичным заверением: средства в безопасности, записи о каждом счете хранятся в нескольких копиях на разных площадках, целостность данных проверена, не потеряно ни одной копейки. Это редкий случай, когда техническое резервирование, о котором в спокойные времена никто не вспоминает, в один день оказалось главным аргументом доверия.

Сильнее всего удар пришелся по самой живой части экосистемы – по такси и по людям, которые пользуются этим сервисом. Воскресным утром водители не могли войти в приложение «Яндекс Про», через которое принимаются заказы и выводится заработок: поездки не отображались, деньги зависали на балансе. Пассажиры либо не могли вызвать машину, либо сталкивались с завышенными в разы ценами – и часть из них уходила к конкурентам, порой даже к официальным таксопаркам, которые в эпоху агрегаторов и не думали вспоминать о своем существовании.

Одна из екатеринбургских таксисток, вышедшая на линию в пять утра, в прямом эфире показывала подписчикам, как за пять минут перерегистрировалась в альтернативном сервисе и искала клиентов по старинке – через личные сообщения. Эта картина – яркая иллюстрация того, насколько глубоко цифровые платформы вплелись в повседневную жизнь: для тысяч водителей сбой приложения означал не просто мелкое неудобство, а конкретные недополученные рубли.

Компания реагировала быстро, хотя и не идеально. К вечеру воскресенья доступ к массовым сервисам был восстановлен, тринадцатого октября «Яндекс» возобновил выплаты водителям и партнерам за последние два дня, пообещав вернуть весь график без потерь: все деньги за выполненные заказы будут направлены водителям.

Но говорить о полном восстановлении такси пока рано. Сегодняшние жалобы из Казани, Самарской и Оренбургской областей, Санкт-Петербурга и Подмосковья повторяют один и тот же сюжет: долго ищется автомобиль, приложение выдает ошибки, при попытке вызвать единственную свободную машину появляется странное уведомление о превышении лимита заказов. Сбои то затухают, то вспыхивают снова, и компания продолжает над этим работать, не называя точных сроков – потому что честнее признать: их пока не знает никто. Это не оправдание, а констатация: инфраструктуру, которую строили годами, не пересобрать за несколько дней.

Сама стратегия восстановления выглядит профессионально. «Яндекс» перешел в аварийный режим и возвращает сервисы поэтапно – в первую очередь те, которыми пользуется больше всего людей: «Алису», «Поиск», «Карты», «Такси», «Почту». Второстепенные функции сознательно ограничиваются ради устойчивости ядра – 11 октября компания сама урезала часть функций «Диска», чтобы высвободить ресурсы для критичных сервисов. Облачная платформа по-прежнему работает в ограниченном режиме, инженеры трудятся круглосуточно, техподдержка переведена в усиленный режим и, судя по очередям в обращениях, действительно перегружена.

Постепенно возвращается и «Яндекс Пэй»: оплата картами уже доступна, хотя система остается нестабильной, а для действующих клиентов временно повышена ставка по накопительным счетам – маленький, но понятный жест компенсации за доставленные неудобства.

При этом вокруг компании сложилась редкая для конкурентного рынка кооперация. «Яндекс» договорился с VK Cloud, Selectel и К2Cloud об ускоренном переносе данных пострадавших клиентов на чужие площадки – фактически конкуренты объединились перед общей угрозой, и это, пожалуй, единственный светлый сюжет недели: осознание того, что цифровая инфраструктура страны – общее достояние, а не поле битвы за долю рынка.

На государственном уровне прозвучало то, чего отрасль ждала давно: глава Минцифры Максут Шадаев назвал атаки беспрецедентными и заявил, что его ведомство совместно с Минобороны решает вопрос прикрытия дата-центров. Безопасность физических объектов цифровой инфраструктуры становится совместной задачей государства и бизнеса – и это означает, что после этой недели подход к защите ЦОД в стране изменится надолго.

Пресс-секретарь президента Дмитрий Песков назвал «Яндекс» сильной и мощной компанией, которая принимает экстренные меры. И подчеркнул, что ситуация находится в поле зрения правительства, в Кремле также обсуждают и механизм компенсации потерь.

Сроки восстановления – цифры разных порядков, и их важно не смешивать. Массовые сервисы возвращаются поэтапно на резервной инфраструктуре, не дожидаясь ремонта поврежденных площадок, – и основная часть повседневных функций уже работает. Но полное восстановление дата-центров и строительство новый эксперты оценивают в полтора года, а оснащение их оборудованием займет больше времени, поскольку высокопроизводительные серверы в текущих условиях так просто не купить. Срочные закупки уже поднимают цены на серверы и облачные услуги, и это ударит по всему рынку, а не только по одной компании. Общий ущерб оценивается примерно в пятнадцать миллиардов рублей.

Итог недели стоит сформулировать трезво, без парадных реляций. Удар действительно серьезный: впервые за время боевых действий из строя выведены сразу три крупные площадки, сбой докатился до чужих бизнесов и соседних стран, а уязвимость, о которой в отрасли говорили годами, оказалась не теоретической. Руководство «Яндекса» действует по классической схеме аварийного восстановления и не скрывает масштаба ущерба: приоритет массовым сервисам, деградация второстепенных функций, прозрачные статус-сообщения, выплаты партнерам, компенсации пользователям, совместная с Минобороны работа над физической защитой.

По сути, так и должны действовать компании, для которых непрерывность сервиса является базовым обязательством. Но сама скорость, с которой «Яндекс» вернул к жизни основные сервисы, отраслевые наблюдатели называют беспрецедентной, и за этим стоит многолетняя практика резервирования, к которой компания, по признанию специалистов, всегда подходила очень ответственно. Да, пока такси работает не в полном объеме, «Пэй» нестабилен, «облако» ограничено, а впереди месяцы работ по физическому восстановлению площадок. Однако движение идет в одну сторону – к полному восстановлению.

И если еще неделю назад дата-центры казались чем-то далеким от обычной жизни – башнями с серверами за бетонным забором, – то теперь понятно: это нервные окончания общества, по которым бьют, когда хотят ударить по стране. И их защита должна стать общим делом как компаний, так и государства.

Александр КУЗНЕЦОВ