В ответ на пост
#РазборСбояBitrix24 #Битрикс24 #IT
Часть №2.
Когда стало понятно, что это не просто массовый сбой
После первых сообщений от клиентов у нас была самая очевидная версия: проблема на стороне Битрикс24, и мы просто попали в общий сбой.
Но дальше картина начала ломаться.
Мы начали писать коллегам по рынку, которые тоже делают тиражные решения для Битрикс24. И выяснилось, что у части из них таких проблем вообще нет. Это уже был плохой знак для нашей первой гипотезы ... 🙈
Потом мы начали проверять свои продукты. У нас их больше 50, и оказалось, что часть сценариев работает, часть нет. Более того, начали приходить сообщения не только по одному приложению и не только по одному серверу. То есть проблема выглядела шире, но при этом вела себя не как единый тотальный сбой ...
Отдельно нас сильно сбивало то, что на коробочных Битрикс24 все продолжало работать. А вот облачные порталы вели себя нестабильно. Это вообще не укладывалось в простую картину "платформа лежит".
К вечеру стало ясно: если продолжать думать в логике "ну, наверное, у них там что-то упало", мы просто потеряем время ...
Поэтому уже в полночь пятницы мы перестали спорить с гипотезами и начали проверять все по слоям. Не приложение целиком, а каждый уровень отдельно: DNS, сеть, соединение, авторизацию, ответы API.
И вот именно в этот момент история перестала быть обычным сбоем и превратилась в полноценное техническое расследование.
В следующем посте расскажем, что именно мы нашли ночью, и почему проблема оказалась намного неприятнее, чем просто "что-то не отвечает".
---
