Было это 10 лет тому назад. Работал я в одной достаточно крупной организации, назовем ее транспортной компанией. Не хочется светить название, ибо она сейчас у всех на слуху, но в то время контора только начинала свое бурное развитие.
Был я обычным системным администратором с ненормированным графиком. Иной раз работы не было по 3 недели, но денежка капала, что меня не могло не радовать. Но если вдруг срочно что-то поломается, то я должен в кратчайшие сроки заняться вопросом. Помимо меня было еще 2 человека и таким образом мы «дежурили» сутки через трое. Ну как дежурили? Просто в эти сутки нужно было находиться возле ПК с интернетом и в случае чего выехать в дата-центр для устранения неисправности. Такие ситуации случались крайне редко, что радовало еще больше.
Свой головной офис компания расположила в старом промышленном помещении бывшего завода. Дела шли, работа кипела, все были довольны. Сервера под пристальным присмотром. В декабре так меня вообще ни разу не вызывали — ничего не происходило. А вызывать устранять проблему должен технический директор конторы. Мужик очень грамотный и по пустяку никогда не дергал.
31 декабря после 20 вечера, конечно же, в любой семье идут последние приготовления к праздничному столу. И я, помню, стоял в фартуке и помогал резать оливье, как тут звонок с работы, но сегодня не мой день дежурства. Звонит техдир:
— Игорь, у нас что-то непонятное происходит с инфраструктурой. Попеременно отключаются сервера, то один, то другой. Можешь глянуть? Не могу дозвониться Борису (другому коллеге, который должен был дежурить).
— Да, конечно.
Отбросив все свои дела под неодобрительный взгляд близких, я сел за компьютер. Но сам ничего не понял — все работало. Уже собирался было выключать компьютер и телеграфировать, что «проблема исчезла сама по себе», как тут смотрю, что совсем погас один из серверов. И официальный сайт конторы недоступен.
На все мои попытки достучаться до сервера были безрезультатные — такое ощущение, что его физически отключили. Телеграфировал об этом техдиру, на что он мне ответил:
— Придется тебе ехать в офис. Больше некому. Сам я уже по традиции в бане…
Что поделать? Говорю своим, что буду буквально через час, и выдвигаюсь. Благо, ехать было совсем недалеко.
В то время еще не было каких-то электронных пропусков и дверей на электромагнитах. Доступ к офису надежно охранял сторож Михалыч. Поговаривают, что он работал в этом здании еще, когда здесь был завод. Но все знали, что с ним компания надежно защищена. Он также заведовал и ключами от всех мест, в том числе и от дата-центра. Был негласным завхозом всего здания, и в любой момент на него можно было положиться.
По приезду меня очень радостно встретил Михалыч:
— О, ну хоть кто-то со мной Новый Год будет отмечать!
— Михалыч, ты ж, вроде, не пьешь и у тебя есть кот. Я на 10 минут. Дай ключ от серверной.
— А там открыто!
— Как открыто?
— Ну вот так! Я открыл! Сигнализация пожарная сработала!
Думаю, во дела!.. Наверное, что-то задымилось, и меня ждет квест до утра по восстановлению неисправности. Быстрым шагом идем в серверную вместе с Михалычем. Но внутри оказалось все нормально. Обнюхав всю комнату, я не нашел никаких намеков на запах гари. Стал разбираться, почему один из серверов не работает. Проблему нашел быстро — коннектор был вставлен не очень плотно. Поправив сетевой коннектор, я проверил — все работает.
Уже собирался было уходить, но тут на меня напали смутные сомнения. Когда я первый раз проверял, то этот сервер работал. Потом они отключались в каком-то хаотичном порядке. А затем перестал работать тот, от которого отключили коннектор. Конечно же, я заподозрил во всем Михалыча.
Было решено посмотреть записи с видеокамер. Что я и сделал. Чтобы не смущать Михалыча, я посмотрел это не из его каморки, а со своего ноутбука. Во все моменты, когда падали сервера, туда заходил Михалыч. Ну, не мог же он эти коннекторы отключить? И зачем ему?.. И самое главное, что я не нашел никаких намеков на срабатывание пожарной сигнализации.
Дело в том, что камер внутри серверной не было, они были в коридоре. Но они прекрасно писали звук, чем я и воспользовался. И что вы думаете? Надел наушники и услышал голос Михалыча, который выходил из серверной, приговаривая:
— Желтая мигает, зеленая горит, проводочки мне пришлось им отключить.
Спускаюсь в каморку к Михалычу и понимаю — видимо, человек решил отметить Новый Год и стало ему скучно. Раньше за ним подобного поведения не наблюдали, но всякое бывает. Как я уже потом узнал — развязался он в плане алкоголя. В содеянном он, конечно же, признался. А я вижу, что все — поплыл он. И понимаю, что это минимальное, что он мог сделать — отключить провода. А если обесточит здание? А если еще больше дел наделает? Разговаривать с ним было бесполезно — он просто улыбался мне в ответ.
Позвонил техдиру и объяснил ситуацию. Вместе с ним мы понимали, что если сервера будут обесточены, то ночные задания, резервные копии и много-много различных «штук» придется разгребать долгое время.
Ничего не оставалось делать, как отправлять Михалыча домой отмечать Новый Год, а самому оставаться до утра в здании. За это мне пообещали жирную премию — все согласовали быстро, родные немного обиделись, но да ладно. Выгнав Михалыча домой, я устроился в его каморке.
На часах уже 23, а я даже с собой бутылку с водой не взял. Просить кого-то, чтобы мне что-то привезли, не стал. Досидел до 9 утра за компьютером, попил чая из чашки Михалыча, дождался сменщика и ушел. Ночь прошла нормально, сервера работали. Михалыча никто не уволил, а я получил за это неплохую премию, как раз на машину тогда копил.
