17 подписчиков
Подробности сбоя по окончании технических работ в М9: причины произошедшего и компенсация простоя
Технические работы в дата-центре M9 были запланированы с 23:00 04.07 до 1:00 05.07 по МСК, о чём мы предварительно оповестили клиентов по почте. Сами работы оператором связи были продлены до 6:00 05.07, о чём уже не было возможности уведомить в адекватное время. При этом из-за ошибки сотрудника оператора связи работы пошли не по плану. Рассказываем, что случилось.
По требованию оператора связи несколько месяцев назад произошла смена автономной системы, от которой происходит анонс наших сетей в дата-центре М9. Смена анонса прошла бесшовно. Актуальные данные были как в базе RIPE, так и в РАНР (в соответствии с российским законодательством).
Работы, которые сегодня планово проводил оператор связи, потребовали замены коммутационного оборудования. На новое оборудование по ошибке сотрудника оператора связи был установлен конфигурационный файл, который содержал старые данные об анонсе сетей от автономной системы оператора связи.
Именно по этой причине ночью некоторое время всё работало, после чего операторы связи и оборудования ТСПУ, увидев, что трафик автономной системы адресов не совпадает с данными в RIPE и РАНР, начали блокировать трафик с их стороны. После выяснения причины самым быстрым путём был возврат к правильному анонсу, что в итоге и было сделано.
Данная проблема носила человеческий фактор и не была связана с физическими проблемами на оборудовании или на одном из каналов связи. Также подчёркиваем, что недоступна была относительно небольшая часть серверов и они не перезагружались. В настоящий момент сетевая доступность всех серверов в М9 восстановлена. Серверы в других дата-центрах работали и работают штатно.
Если ваша виртуальная машина была среди тех, что затронула сегодняшняя проблема, свяжитесь с нами по почте support@ruvds.com. Хотя сбой произошёл по независящим от нас причинам, все пострадавшие серверы получат компенсацию согласно нашему SLA. Приносим извинения за доставленные неудобства.
1 минута
5 июля 2024