Найти в Дзене

Жесткие диски для серверов и NAS: почему дешевые SMR ломают RAID и как выбрать накопители 24/7

Оглавление

Пятница, 18:40. В центральном офисе торговой компании планово заменяют вышедший из строя жесткий диск в сетевом хранилище NAS на восемь отсеков. Администратор вставляет новенький накопитель на четыре терабайта, купленный в ближайшем розничном магазине бытовой техники. Нажимается кнопка перестроения массива (Rebuild), и инженер со спокойной душой уходит на выходные.

В субботу утром система мониторинга взрывается тревожными оповещениями. Перестроение массива продвинулось всего на двенадцать процентов, после чего еще два соседних диска перешли в статус аварийного отказа. Массив RAID 5 полностью разрушен, а доступ к резервным копиям и файловым шарам парализован. Причина кроется в невидимой для обычного пользователя разнице между технологиями магнитной записи и прошивками накопителей. Чтобы избавить бизнес от дорогостоящих простоев, наши инженеры подготовили исчерпывающий гид по серверным и специализированным жестким дискам.

Авария в сетевом хранилище: почему ребилд массива длится неделями и роняет диски.

Когда в многодисковом хранилище выходит из строя один накопитель, оставшиеся исправные диски начинают работать с предельной нагрузкой. Контроллеру необходимо непрерывно читать терабайты информации со всех оставшихся дисков, вычислять контрольные суммы четности и последовательно записывать восстановленные блоки на новый диск.

Если новый накопитель использует скрытую черепичную запись, скорость случайной записи контроллера падает до нескольких килобайт в секунду. Процесс ребилда растягивается с положенных десяти часов до пяти-семи суток. Все это время соседние изношенные диски непрерывно вибрируют и греются на пике своих возможностей. Механика старых дисков не выдерживает многодневного стресса, приводя к фатальному падению второго накопителя и полному краху массива.

Технологии магнитной записи: классическая CMR против черепичной SMR.

Плотность размещения данных на магнитных пластинах современных дисков подошла к физическому пределу. Чтобы вместить больше информации на одну пластину без удорожания производства, инженеры разработали два метода записи:

  • CMR (Conventional Magnetic Recording). Классическая перпендикулярная запись. Дорожки данных располагаются строго параллельно друг другу с физическим защитным зазором. Запись нового сектора никак не задевает соседние дорожки.
  • SMR (Shingled Magnetic Recording). Черепичная магнитная запись. Записывающая головка физически шире считывающей. Дорожки накладываются друг на друга внахлест, подобно черепице на крыше дома.

Диски с технологией CMR обеспечивают предсказуемую и стабильную скорость записи при любых сценариях. Накопители SMR создавались исключительно для холодного архива и однократной последовательной записи.

Физика черепичной записи: почему контроллер SMR впадает в глубокий ступор.

Главная уязвимость черепичной технологии проявляется при необходимости изменить один сектор в середине пластины. Поскольку дорожки перекрывают друг друга, головка не может перезаписать единичный блок без повреждения соседних данных.

Контроллеру диска SMR приходится выполнять сложный цикл операций. Он считывает всю соседнюю пачку дорожек во встроенный кэш, модифицирует нужные секторы, заново стирает целевую область и перезаписывает массив дорожек заново. Если на диск идет постоянный поток случайных операций записи, буфер переполняется. Внутренний контроллер диска перестает отвечать на внешние команды интерфейса SATA на тридцать-шестьдесят секунд, занимаясь внутренней очисткой блоков.

Лимит ожидания сектора (TLER / ERC): фундаментальный конфликт десктопных HDD и RAID.

Поведение диска при обнаружении трудночитаемого сектора кардинально различается в зависимости от сферы применения. В прошивках накопителей для этого предусмотрен специальный алгоритм ограничения времени коррекции ошибок:

  • Десктопные накопители (без TLER). Если бытовой диск встречает поврежденный сектор, его прошивка стремится спасти пользовательские данные любой ценой. Диск может до двух минут непрерывно калибровать головки и перечитывать сектор, полностью замораживая шину передачи данных.
  • Серверные накопители (с таймером TLER / ERC). В жестких дисках enterprise-класса время ожидания ограничено семью-восемью секундами (Time-Limited Error Recovery). Если сектор не прочитался сразу, диск честно сообщает об ошибке аппаратному контроллеру.

Аппаратный RAID-контроллер не станет ждать две минуты: через десять секунд молчания он признает зависший диск неисправным и исключит его из пула. Надежная связка дисков с аппаратными контроллерами детально описана в нашем разборе про RAID-контроллеры MegaRAID 9460-16i для баз 1С.

Датчики ротационной вибрации (RV Sensors): спасение механики в плотных корзинах.

В домашнем компьютере работает один жесткий диск, закрепленный в просторном корпусе. В сервере или сетевом хранилище от восьми до двадцати четырех накопителей упакованы в единую металлическую корзину с расстоянием между салазками в считанные миллиметры.

Вращение шпинделей на скорости 7200 оборотов в минуту и резкие перемещения актуатора головок создают резонансные механические колебания. Десктопный диск без специальной защиты под действием чужой вибрации смещает считывающую головку с дорожки шириной в десятки нанометров. Накопитель вынужден пропускать обороты пластины в ожидании стабилизации механики, из-за чего скорость обмена данными падает в пять раз. Серверные диски оснащаются пьезоэлектрическими датчиками RV (Rotational Vibration Sensors): электроника улавливает микроколебания корпуса и мгновенно подает компенсирующий ток на электромагнитный привод головки, удерживая ее точно над центром дорожки.

Специфика прошивок видеонаблюдения: набор команд ATA Streaming против целостности СУБД.

Производители выпускают специализированные линейки жестких дисков для систем безопасности, такие как Seagate SkyHawk или Western Digital Purple. Их микропрограмма оптимизирована под непрерывную круглосуточную видеозапись 24/7.

Ключевое отличие прошивки видеонаблюдения — поддержка командного расширения ATA Streaming Command Set. При записи потоков высокого разрешения с десятков IP-камер контроллеру важнее не потерять плавность видеоряда, чем восстановить поврежденный байт. Если на пластине возникает сбойный сектор, диск для видеонаблюдения пропускает ошибку и продолжает писать следующий кадр без задержки. В видеозаписи это вызовет лишь незаметный артефакт в углу экрана. Однако использовать диски видеонаблюдения для баз данных категорически нельзя: пропуск байта в СУБД приведет к повреждению целостности таблиц.

Форматы физической разметки: эмуляция 512e против нативных секторов 4Kn.

Исторически сектор жесткого диска содержал пятьсот двенадцать байт полезных данных. С ростом емкости индустрия перешла на стандарт Advanced Format с размером физического сектора четыре килобайта (4 096 байт):

  • Эмуляция 512e (512 Emulation). Физический сектор на пластине равен четырем килобайтам, но внутренний контроллер диска эмулирует восемь логических секторов по 512 байт для совместимости со старыми операционными системами.
  • Нативный формат 4Kn (4K Native). Логический и физический секторы совпадают и составляют строго четыре килобайта. Отсутствует вычислительный слой трансляции адресов.

Использование нативного формата 4Kn устраняет паразитные накладные расходы на операциях «чтение-модификация-запись» (RMW — Read-Modify-Write) и повышает эффективность работы гипервизоров. Для скоростных баз данных наряду с классическими HDD используются твердотельные накопители, особенности которых мы разбирали в статье про серверные накопители U.2 NVMe против десктопных M.2 SSD с защитой PLP.

Нагрузка по записи (Workload Rating) и время наработки MTBF: от 55 до 550 ТБ в год.

Каждый накопитель проектируется под строго определенный ресурс циклов позиционирования механических головок и объемов передачи данных. В паспортах дисков производители указывают параметр Workload Rate (лимит годовой нагрузки записи и чтения):

   Сравнение моделей — AFOX.SU
Сравнение моделей — AFOX.SU

Попытка использовать потребительский диск в сервере приводит к десятикратному превышению допустимой паспортной нагрузки уже за первые четыре месяца непрерывной работы.

Гелиевое заполнение гермоблока (HelioSeal): физика плотных накопителей от 14 ТБ.

Вместительные современные накопители емкостью от четырнадцати до двадцати двух терабайт физически невозможно построить по традиционной воздушной технологии. Чтобы разместить до десяти пластин в стандартном форм-факторе 3.5 дюйма, инженеры заполняют гермоблок чистым гелием.

Плотность газообразного гелия в семь раз ниже плотности атмосферного воздуха. Снижение аэродинамического сопротивления кардинально меняет поведение механических узлов диска:

  1. Минимизация турбулентности. Пластины и рычаги блока головок не испытывают аэродинамической вибрации при вращении со скоростью 7200 об/мин. Это позволило уменьшить толщину пластин и сократить расстояние между ними.
  2. Снижение энергопотребления на тридцать процентов. Электродвигателю требуется заметно меньше энергии для преодоления трения среды, что существенно уменьшает нагрев накопителя в плотной серверной корзине.
  3. Абсолютная герметичность корпуса. Лазерная сварка гермоблока предотвращает попадание влаги, пыли и агрессивных химических соединений внутрь механического отсека.

Сводная таблица: сравнение потребительских, специализированных и корпоративных HDD.

Чтобы упростить подбор комплектующих под конкретные технические задачи, наши специалисты подготовили сводную матрицу характеристик:

   Сравнение моделей — AFOX.SU
Сравнение моделей — AFOX.SU

Выбор накопителя соответствующего класса гарантирует штатную работу дисковой корзины без внезапных сбоев контроллера.

Расчет теплового режима и вентиляции корзин с накопителями в серверных стойках.

Жесткие диски являются механическими устройствами, крайне восприимчивыми к перегреву. Повышение рабочей температуры гермоблока свыше сорока пяти градусов Цельсия приводит к деградации смазки подшипника гидродинамического типа и потере эластичности подвеса головок.

Для надежной эксплуатации соблюдайте следующие температурные нормы:

  • Целевой диапазон температур. Рабочая температура дисков в корзине должна поддерживаться в границах тридцати двух — сорока двух градусов Цельсия.
  • Контроль воздушного потока. Заглушки пустых слотов (Drive Blanks) должны быть установлены на все свободные отсеки. Отсутствие заглушек нарушает расчетный туннельный обдув, лишая крайние накопители охлаждения.
  • Стабильное питание 12 В и 5 В. Пульсации питающих линий приводят к сбоям позиционирования актуатора. Об архитектуре надежного электропитания читайте в нашем материале про серверные блоки питания стандартов CRPS и 2U.

Надежные жесткие диски для серверов и сетевых хранилищ из нашего каталога.

В нашем каталоге представлены сертифицированные накопители корпоративного класса и диски для систем безопасности с гарантией качества и быстрой отгрузкой по России.

Серверный жесткий диск Seagate Exos X18 18TB — флагман корпоративного хранения.

Вместительный гелиевый накопитель Seagate Exos X18 18TB ST18000NM000J со скоростью вращения 7200 об/мин, буфером 256 МБ и поддержкой форматов 512e/4Kn. Оснащен продвинутыми датчиками ротационной вибрации и рассчитан на колоссальную годовую нагрузку 550 ТБ. Оптимальное решение для масштабных дата-центров, систем резервного копирования и облачных платформ.

   Жесткий диск серверный Seagate Exos X18 ST18000NM000J 18TB 3.5" SATA 6Gb/s, 7200rpm, 256MB, 512e/4Kn, Bulk
Жесткий диск серверный Seagate Exos X18 ST18000NM000J 18TB 3.5" SATA 6Gb/s, 7200rpm, 256MB, 512e/4Kn, Bulk

Серверный жесткий диск Seagate Exos 7E10 8TB — проверенная опора стоечных серверов.

Классический корпоративный диск Seagate Exos 7E10 8TB ST8000NM017B формата 3.5 дюйма со скоростью 7200 об/мин. Обеспечивает стабильную круглосуточную работу в плотных дисковых корзинах серверов Dell, Supermicro и HP под управлением аппаратных RAID-контроллеров.

   Жесткий диск серверный Seagate Exos 7E10 ST8000NM017B 8TB 3.5" SATA 6Gb/s, 7200rpm, 256MB, 512e, Bulk
Жесткий диск серверный Seagate Exos 7E10 ST8000NM017B 8TB 3.5" SATA 6Gb/s, 7200rpm, 256MB, 512e, Bulk

Жесткий диск Western Digital Purple Pro 4TB — профессиональная видеоаналитика.

Специализированный накопитель Western Digital Purple Pro 4TB WD44PURZ со встроенной технологией AllFrame AI. Спроектирован для работы в современных сетевых видеорегистраторах NVR с поддержкой глубокого обучения и одновременной записи сотен видеопотоков высокой четкости.

   Жесткий диск Western Digital 4TB WD44PURZ Purple Pro Surveillance, Cache 128MB
Жесткий диск Western Digital 4TB WD44PURZ Purple Pro Surveillance, Cache 128MB

Жесткий диск Seagate SkyHawk 4TB Surveillance — надежный архив видеонаблюдения.

Энергоэффективный накопитель Seagate SkyHawk 4TB ST4000VX016 на базе проверенной перпендикулярной магнитной записи CMR. Прошивка ImagePerfect предотвращает потерю кадров, гарантируя бесперебойную фиксацию событий без перегрева корпуса.

   Жесткий диск Seagate SkyHawk Surveillance ST4000VX016 4TB 3.5" SATA 6Gb/s, 5400rpm, 256MB, 24x7, CMR, Air, Bulk
Жесткий диск Seagate SkyHawk Surveillance ST4000VX016 4TB 3.5" SATA 6Gb/s, 5400rpm, 256MB, 24x7, CMR, Air, Bulk

Инженерный чеклист перед покупкой накопителей для RAID-массива и NAS.

Перед покупкой партии дисков для модернизации дисковой подсистемы наши специалисты советуют проверить следующие параметры:

  • Технология записи в спецификации. Убедитесь в наличии маркировки CMR. Избегайте использования дисков SMR в любых типах программных и аппаратных RAID.
  • Количество отсеков шасси. Для корзин вместимостью от восьми дисков выбирайте модели с обязательным наличием встроенных датчиков ротационной вибрации RV.
  • Совместимость с контроллером по питанию. Для мощных систем обеспечьте качественные кабели питания, особенности выбора которых мы рассматривали в гайде про силовые кабели C13 и C19 в стойках и ИБП.
  • Бесперебойное электроснабжение. Внезапное обесточивание стойки в момент сброса кэша может повредить разметку диска. Для защиты используйте решения, описанные в статье про онлайн-ИБП с двойным преобразованием напряжения.

Регламент обслуживания: регулярная поверка SMART и плановая замена дисков пула.

Предотвратить внезапную потерю информации позволяет регулярный автоматизированный мониторинг состояния дискового парка:

  • Контроль переназначенных секторов. Рост атрибутов Reallocated Sectors Count и Current Pending Sector сигнализирует о физической деградации магнитной поверхности и требует скорейшей замены диска.
  • Слежение за ошибками позиционирования. Увеличение счетчика Raw Read Error Rate или Seek Error Rate часто указывает на повреждение механического подвеса блока головок.
  • Регулярный фоновый Patrol Read / Data Scrubbing. Настройте ежемесячное фоновое сканирование массива на уровне контроллера для своевременного обнаружения скрытых битовых сбоев до начала аварийного ребилда.
  • Плановая ротация дисков по возрасту. Корпоративные диски рекомендуется планово выводить из эксплуатации после четырех-пяти лет непрерывной работы 24/7.

Аппаратная синергия: контроллеры SAS, стабильное электропитание и кабельная обвязка.

Производительность и отказоустойчивость дисковой полки зависит не только от самих жестких дисков, но и от окружающей инфраструктуры. Быстрая оперативная память снижает время ожидания очередей ввода-вывода при интенсивной работе с СУБД, о чем мы детально писали в статье про серверную оперативную память ECC Registered RDIMM.

Грамотное сочетание надежных корпоративных жестких дисков CMR, выделенного аппаратного RAID-контроллера с кэширующим буфером и качественного онлайн-электропитания создает фундамент для непрерывного функционирования критически важных корпоративных сервисов компании.

Выбирайте надежные накопители корпоративного класса в нашем каталоге с квалифицированной технической поддержкой наших сотрудников.

AFOX.SU — выгодные цены, персональный подход и доставка по России.

Afox.su - программные и аппаратные решенияДобро пожаловать на наш канал о серверах и сетевом оборудовании! Здесь вы найдете информацию о том, как работают серверы и сетевое оборудование, а также советы по их настройке и эксплуатации.