133 подписчика
Галерная профессиональность и мониторинг
У нас в галере для мониторинга успешно трудится Grafana с кучей подключенных источников. Если на каком-то из кучи серверов наших и клиентов закончится место, то графана об этом узнает и начнет спамить в телегу.
Только возникла небольшая неувязочка. Как истинный профессионал я не настроил отдельный мониторинг свободного места на самом сервере, где крутится графана. А потом еще, до кучи, дал разрабу на этот же сервер запустить тестово проект с интеграцией с puppeteer, которая генерит много артефактов прям на сервер.
Как итог — быстро кончилось место на сервере для мониторинга и весь мониторинг умер. А я еще радовался, что у нас резко перестали приходить уведомления о скорой кончине диска/памяти/проца на каких-либо серверах.
Виновный был быстро наказан и ситуация быстро нормализовалась. Но страшно представить сколько у нас еще таких замкнутых систем.
#жизнь_галеры
Около минуты
19 августа 2024