В 2021 году Backblaze добавила 40 460 жестких дисков, и по состоянию на 31 декабря 2021 года у нас было 206 928 дисков под управлением. Из этого числа было 3760 загрузочных дисков и 203 168 дисков с данными. Этот отчет будет посвящен нашим дискам данных. Мы рассмотрим показатели отказов жестких дисков за 2021 год, сравним эти показатели с предыдущими годами и представим статистику отказов в течение всего срока службы для всех моделей жестких дисков, используемых в нашем центре обработки данных по состоянию на конец 2021 года. Попутно мы делимся своими наблюдениями. и понимание представленных данных, и, как всегда, мы надеемся, что вы сделаете то же самое в разделе комментариев в конце сообщения.
Показатели отказов жестких дисков в 2021 г.
В конце 2021 года Backblaze отслеживала 203 168 жестких дисков, используемых для хранения данных. Для нашей оценки мы исключили из рассмотрения 409 дисков, которые использовались либо для целей тестирования, либо для моделей дисков, для которых у нас не было по крайней мере 60 дисков. Это оставляет нам 202 759 жестких дисков для анализа для этого отчета.
Наблюдения и примечания
Правила старого парня: в 2021 году у Seagate емкостью 6 ТБ (модель: ST6000DX000) была самая низкая частота отказов среди всех моделей накопителей с годовой частотой отказов (AFR) 0,11%. Это еще более впечатляет, если учесть, что эта модель накопителя емкостью 6 ТБ является самой старой в парке со средним возрастом 80,4 месяца. Количество дисков, 886, и 2021 драйв-дней, 323 390, находятся на нижней стороне, но после почти семи лет эксплуатации эти диски показывают свой нос в конце кривой ванны.
Дети в порядке: две модели дисков являются новыми для 2021 года, и обе работают хорошо. Группа дисков WDC емкостью 16 ТБ (модель: WUH721816ALE6L0) имеет средний возраст 5,06 месяца и показатель AFR 0,14%. В то время как когорта накопителей Toshiba емкостью 16 ТБ (модель: MG08ACA16TE) имеет средний возраст 3,57 месяца и AFR 0,91%. В обоих случаях количество дней вождения меньше, но у этих двух моделей накопителей хорошее начало.
АФР, что это значит?
AFR означает годовую частоту отказов. Это отличается от годовой частоты отказов, при которой количество дисков одинаково для каждой модели (группы) в течение годового периода. В нашей среде диски добавляются и уходят в течение года. Например, новый диск, установленный в четвертом квартале, может отработать всего 43 дня, в то время как диск, который вышел из строя в июле, может отработать 186 дней, а диски, непрерывно работающие в течение года, могут отработать 365 дней каждый. Мы подсчитываем количество дней вождения, которое каждый водитель вносит в течение периода, и переводим общее количество в годовой исчисление по следующей формуле:
AFR = (сбои диска / (дни привода / 365)) * 100
Состояние пациента стабильное. В прошлом квартале мы сообщали о состоянии наших дисков Seagate емкостью 14 ТБ (модель: ST14000NM0138), установленных на серверах хранения данных Dell. Они терпели неудачу чаще, чем ожидалось, и все — Backblaze, Seagate и Dell — хотели знать, почему. Вышедшие из строя диски были проверены специалистами по анализу неисправностей, и в конце третьего квартала было принято решение в качестве первого шага обновить прошивку для той группы дисков, которые все еще находятся в эксплуатации. В результате ежеквартальный уровень отказов снизился с 6,29 % в третьем квартале до 4,66 % в четвертом квартале, стабилизировав быстрый рост отказов, который мы наблюдали во втором и третьем кварталах. 19 дисков, вышедших из строя в четвертом квартале, были отправлены для дальнейшего анализа. Мы продолжим следить за этим процессом в ближайшие кварталы.
AFR на 2021 год для всех моделей приводов составил 1,01%, что немного выше, чем 0,93%, о которых мы сообщали для 2020 года. В следующем разделе будут сравниваться данные за последние три года.
Сравнение статистики Drive за 2019, 2020 и 2021 годы
На приведенной ниже диаграмме сравниваются AFR за каждый из последних трех лет. Данные за каждый год включают только этот год и модели с активным приводом, представленные на конец каждого года.
Копнув немного глубже, мы можем объединить различные модели дисков по производителям, чтобы увидеть, как показатели отказов по производителям изменились за последние три года.
Обратите внимание, что для данных WDC пустое значение означает, что в этом квартале в нашем центре обработки данных не было счетных дисков WDC.
Тенденции на 2021 год
AFR оставался низким в 2021 году: в 2021 году AFR для всех дисков составлял 1,01%. Это было немного выше, чем в 2020 году и составило 0,93%, но это хороший признак того, что падение в 2020 году с 1,83% в 2019 году не было аномалией. Что стоит за 1,01% на 2021 год? Большие диски, как показано ниже:
AFR для более крупных дисков, определенных здесь как диски емкостью 12 ТБ, 14 ТБ и 16 ТБ, ниже AFR 2021 года, составляющего 1,01% для всех дисков. Диски большего размера составляют 69% от общего числа дисков, но, что более важно, они составляют 66% от общего количества дней работы с дисками, при этом они вызывают только 57% отказов дисков.
Диски большего размера также являются более новыми дисками, которые реже выходят из строя по сравнению со старыми дисками. На самом деле, самый старый большой диск имеет средний возраст 33 месяца, а самый молодой «маленький» (4 ТБ, 6 ТБ, 8 ТБ и 10 ТБ) — 44,9 месяца.
Таким образом, более низкий AFR для более крупных дисков имеет большое значение для поддержания низкого общего AFR на 2021 год.
Разнообразие моделей накопителей сохраняется: в 2021 году мы добавили в нашу ферму две новые модели накопителей, при этом ни одна модель не была выведена из эксплуатации. Сейчас у нас в эксплуатации 24 различных модели приводов. Это по сравнению с низкой точкой 14 в 2019 году и 22 в 2020 году. На приведенной ниже диаграмме «Процентное соотношение количества жестких дисков Backblaze по производителям» показано изменение состава нашей дисковой фермы по мере того, как мы смотрим на количество моделей от каждого производителя, которые мы использовали. последние шесть лет.
Когда мы только начинали, мы часто смешивали и подбирали модели приводов, в основном из-за финансовой необходимости — мы покупали то, что могли себе позволить. По мере нашего роста мы покупали и развертывали диски большими партиями, и их однородность устанавливалась. За последние несколько лет мы снова стали более комфортно смешивать и сопоставлять, что стало возможным благодаря нашей архитектуре Backblaze Vault. Хранилище состоит из шестидесяти томов, каждый из которых содержит 20 дисков. Мы делаем каждый том одной и той же моделью диска, но каждый из томов в хранилище может иметь разные модели дисков и даже разные размеры дисков. Это позволяет нам меньше зависеть от конкретной модели накопителя, поэтому чем больше моделей накопителей, тем лучше.
Разнообразие поставщиков жестких дисков также сохраняется: Глядя на приведенную выше диаграмму «Население жестких дисков Backblaze по количеству моделей по производителям с течением времени», вы можете предположить, что за последние пару лет мы увеличили процентную долю дисков Seagate. Посмотрим, правда ли это.
Похоже, верно и обратное: мы снизили процент дисков Seagate в наших центрах обработки данных, несмотря на то, что мы добавили дополнительные модели Seagate.
Почему важно диверсифицировать несколько производителей? Гибкость, как и увеличение количества моделей. Наличие отношений со всеми основными поставщиками жестких дисков дает нам возможность своевременно получать необходимые ресурсы. Тот факт, что мы можем использовать любую из нескольких различных моделей от этих поставщиков, добавляет этой гибкости.
Статистика жесткого диска за весь срок службы
На приведенной ниже диаграмме показана годовая частота отказов за весь срок службы всех моделей накопителей, находящихся в производстве по состоянию на 31 декабря 2021 года.
Наблюдения и предостережения
Срок службы AFR для всех перечисленных выше дисков составляет 1,4% и продолжает снижаться из года в год. В конце 2020 года AFR составлял 1,54%, а в конце 2019 года AFR составлял 1,62%.
Если посмотреть на приведенную выше диаграмму, некоторые приводы имеют довольно широкий доверительный интервал (> 0,5). В этих случаях у нас недостаточно информации о производительности диска, чтобы быть достаточно уверенными (> 95%) в указанном AFR. Обычно это происходит с меньшим количеством дисков или более новыми дисками.
Ищете номера SSD?
В ближайшие несколько недель мы расскажем о годовых показателях отказов наших SSD-накопителей в отдельном посте. Мы поняли, что объединение анализа наших дисков данных и наших загрузочных дисков в одном посте сбивает с толку. Быть в курсе.
