В Timeweb сообщили причину, почему часть облачных сервисы компании оказалась недоступны менее чем на два часа (с 13:18 до 15:05 мск). Это произошло из-за сетевого сбоя, возникшего при обновлении гипервизоров. Были затронуты все локации, кроме Новосибирска.
Постмортем: ограничение доступности облачных сервисов 17 ноября
Рассказываем, что произошло, как восстанавливали доступность и что изменим, чтобы избежать повторения.
Что случилось
Мы проводили обновление сетевого стека гипервизоров для повышения безопасности инфраструктуры.
Во время обновления служба динамической маршрутизации перезапустилась не полностью. В результате этого гипервизоры не смогли повторно анонсировать маршруты к сетевому оборудованию, и часть серверов потеряла сетевую связность.
При этом сами виртуальные серверы продолжали работать.
Как восстанавливали работу
13:18 мск начались проблемы с сетевой доступностью серверов.
13:28 мск инженеры локализовали проблему и приступили к восстановлению.
13:47 мск сообщили о проблемах в локациях SPB, MSK, DE, NL и KZ. Инженеры полностью перезапустили сетевой стек гипервизоров, после чего маршрутизация восстановилась.
14:17 мск большая часть серверов снова стала доступна по сети.
15:05 мск работа всех сервисов в рамках инцидента полностью восстановлена.Что дальше
Расширим проверки после обновления гипервизоров: будем проверять каждый компонент службы маршрутизации, а не только службу целиком.
Увеличим интервалы между этапами обновления для выявления проблемы до перехода к следующим нодам.
Ускорим восстановление сетевого стека при похожих сбоях, чтобы быстрее возвращать доступность сервисов.
17 ноября 2026 года пользователи сообщили о сбоях в работе сервисов хостинг‑провайдера Timeweb. У клиентов компании перестали работать сайты, ресурсы на VPS не отвечают. Затронуты локации в РФ, Казахстане, Германии и Нидерландах. В компании Timeweb заявили, что недоступность возникла на сетевом оборудовании, а инженеры начали заниматься восстановительными работами. «Инцидент закрыт. Зоны: SPB, MSK, DE, NL, KZ. Работа сервисов восстановлена. Разбор инцидента опубликуем позднее». — сообщили в Timeweb спустя менее часа два часа после возникновения проблемы.
