3606 подписчиков
Переполнение дискового пространства стало причиной остановки всех заводов Toyota в Японии
6 сентября автоконцерн Toyota наконец сообщил причину остановки на трое суток всех 14 заводов в Японии. СМИ предполагали, что за коллапсом стоят хакеры, запустившие в систему заказа деталей ошибочный код. Однако крупнейшая японская автомобилестроительная корпорация провела расследование, и причиной оказалась… нехватка места на диске базы данных.
Официальная версия случившегося: «Сбой системы произошел из-за того, что некоторые из многочисленных серверов, обрабатывающих заказы на детали, стали недоступны. Что касается предыстории. 27 августа, за день до возникновения проблемы, проводились регулярные профилактические работы, в ходе которых мы удаляли и систематизировали данные, накопленные в базе данных. Однако из-за недостатка места на диске произошла ошибка, которая привела к остановке системы. Поскольку эти серверы работали в одной системе, аналогичный сбой также произошел в функции резервного копирования, переключение не удалось выполнить, что привело к остановке заводов. После этого 29 августа данные были перенесены на сервер с дисками большей емкости, система была восстановлена и работа заводов возобновилась».
Скорее всего, сбой в БД у Toyota мог случиться из-за переполнения файловой системы транзакционными логами, которые должны были удалиться после очередного бэкапа. Но это по какой-то причине не произошло.
1 минута
7 сентября 2023