В Timeweb сообщили причину, почему часть облачных сервисов компании оказалась недоступна менее чем на два часа (с 13:18 до 15:05 мск). Это произошло из‑за сетевого сбоя, возникшего при обновлении гипервизоров. Были затронуты все локации, кроме Новосибирска.
Постмортем: ограничение доступности облачных сервисов 17 ноября
Рассказываем, что произошло, как восстанавливали доступность и что изменим, чтобы избежать повторения.
Что случилось
Мы проводили обновление сетевого стека гипервизоров для повышения безопасности инфраструктуры.
Во время обновления служба динамической маршрутизации перезапустилась не полностью. В результате этого гипервизоры не смогли повторно анонсировать маршруты к сетевому оборудованию, и часть серверов потеряла сетевую связность.
При этом сами виртуальные серверы продолжали работать.
Как восстанавливали работу
13:18 мск начались проблемы с сетевой доступностью серверов.
13:28 мск инженеры локализовали проблему и приступили к восстановлению.
13:47 мск сообщили о проблемах в локациях SPB, MSK, DE, NL и KZ. Инженеры полностью перезапустили сетевой стек гипервизоров, после чего маршрутизация восстановилась.
14:17 мск большая часть серверов снова стала доступна по сети.
15:05 мск работа всех сервисов в рамках инцидента полностью восстановлена.Что дальше
Расширим проверки после обновления гипервизоров: будем проверять каждый компонент службы маршрутизации, а не только службу целиком.
Увеличим интервалы между этапами обновления для выявления проблемы до перехода к следующим нодам.
Ускорим восстановление сетевого стека при похожих сбоях, чтобы быстрее возвращать доступность сервисов.
17 ноября 2026 года пользователи сообщили о сбоях в работе сервисов хостинг‑провайдера Timeweb. У клиентов компании перестали работать сайты, ресурсы на VPS не отвечают. Затронуты локации в РФ, Казахстане, Германии и Нидерландах. В компании Timeweb заявили, что недоступность возникла на сетевом оборудовании, а инженеры начали заниматься восстановительными работами. «Инцидент закрыт. Зоны: SPB, MSK, DE, NL, KZ. Работа сервисов восстановлена. Разбор инцидента опубликуем позднее» — сообщили в Timeweb спустя менее двух часов после возникновения проблемы.
EspritDeC0rps
Так совпало, что внезапно и у РТК сегодня отвал? Верим?
oleg_umnik
Верим конечно (кроме шуток). Природа отвалов абсолютно разная. Совпало, но не связно. А так-то еще Дипсик ввел лимиты. Тоже совпало. Будем пытаться увязать?
zgwerby
И эппол тоже упал. Видимо, главные сервера стоят не в Купертино, а в ЦОДах Селектела.
И это даёт полную картину происходящего:
- Эппл, успевший вывести свои сервера из Яндекс.Облака и Бегета в Селектел, решил зачистить Бегет (вайпером) и Яндекс.Облако (дронами с задымлением), чтобы никто не увидел айклаудных фото их СЕО и разных селебрити с *закрытых вечеринок*.
- Ростелеком, будучи нагло ограниченным дипсиком в генерации BGP-анонсов через ИИ, пытался ограничить траффик эппла, но дипсик ввёл лимиты и поэтому они переехали успешно в селектел. От такой неслыханной наглости часть оборудования с японскими шильдиками решила сделать себе сэппуку.
- Чтобы скрыть операцию от несведующего большинства, группа элитных стелс-пихотов эппл проникла (через чёрный ход позади ЦОДа) в таймвеб и - подобравшись сзади к обновляющим сетевой стек гипервизоров инженеров - при помощи пневмопихов, нагло украденных у Пневмослона сломала весь процесс.
- За это, собранная группа элитных отбросов от хостеров "Томный Медведь" после скоротечного боя проникла в святая святых эппол и наслопила им патч на патч, после чего легли: сначала майкрософт (промахнулись, бывает, намудрили с промтом), после чего софт управления полётами штатов (оффициально говорят, что это коммутатор. Верим?), а затем, с третьей попытки, и сам эплл.
- Пока лежал эппол - стелс-коммандо Иван Пулин, выкрав те злополучные фото, сначала шантажировал Кукецкого, а затем отбыл через Мексику домой.
Неплохой сценарий для дешевого боевичка в стиле боевичков 90х, без любовных линий, артхауса, деконструкций и остального постпостмодернового дрочева, что добавляют в каждый вышедший сегодня фильм