17 ноября у хостинг-провайдера Timeweb произошёл сбой, из-за которого часть сервисов Timeweb Cloud оказалась недоступна. Проблемы продолжались с 13:18 до 15:05 по московскому времени и затронули все локации компании, кроме Новосибирска.
Причиной стал сбой при обновлении сетевого стека гипервизоров. Работы проводились для повышения безопасности инфраструктуры, однако служба динамической маршрутизации перезапустилась не полностью. В результате гипервизоры не смогли повторно анонсировать маршруты сетевому оборудованию, и часть серверов потеряла сетевую связность. При этом сами виртуальные серверы продолжали работать.
Инженеры локализовали проблему к 13:28 и приступили к восстановлению. В 13:47 Timeweb сообщил о сбоях в локациях Санкт-Петербурга, Москвы, Германии, Нидерландов и Казахстана. После полного перезапуска сетевого стека гипервизоров маршрутизация восстановилась, а к 14:17 большая часть серверов снова стала доступна. Полностью устранить последствия инцидента удалось к 15:05.
По итогам сбоя компания планирует усилить проверки после обновления гипервизоров, проверяя каждый компонент службы маршрутизации отдельно. Также Timeweb увеличит интервалы между этапами обновления и ускорит восстановление сетевого стека при аналогичных инцидентах.
Источник: Timeweb Cloud Alerts
Читайте также:
Beget сообщил, что восстановить все данные невозможно