По состоянию на 31 декабря 2022 года у нас в управлении было 235 608 дисков. Из этого числа было 4 299 загрузочных дисков и 231 309 дисков с данными. Этот отчет будет посвящен нашим дискам данных. Мы рассмотрим частоту отказов жестких дисков за 2022 г., сравним эти показатели с предыдущими годами и представим статистику отказов за весь срок службы для всех моделей жестких дисков, используемых в нашем центре обработки данных по состоянию на конец 2022 г. Попутно мы поделитесь своими наблюдениями и выводами о представленных данных, и, как всегда, мы надеемся, что вы сделаете то же самое в разделе комментариев в конце поста.
Частота отказов жестких дисков в 2022г.
В конце 2022 года Backblaze отслеживала 231 309 жестких дисков, используемых для хранения данных. Для нашей оценки мы исключили из рассмотрения 388 дисков, которые использовались либо для целей тестирования, либо для моделей дисков, для которых у нас не было по крайней мере 60 дисков. Это оставляет нам 230 921 жесткий диск для анализа для этого отчета.
Наблюдения и примечания
Один ноль за год
В 2022 году только один накопитель Seagate емкостью 8 ТБ (модель: ST8000NM000A) не имел сбоев. Этот «ноль» имеет некоторые оговорки: у нас в эксплуатации всего 79 накопителей, а срок службы накопителя ограничен — 22 839 дней. Эти диски используются в качестве запасных для замены вышедших из строя дисков емкостью 8 ТБ.
Как насчет старых парней?
- Жесткий диск Seagate емкостью 6 ТБ (модель: ST6000DX000) — самый старый в нашем парке со средним возрастом 92,5 месяца. В 2021 году его годовая частота отказов (AFR) составляла всего 0,11%, но к 2022 году он немного снизился до 0,68%. Очень приличный показатель в любое время, но особенно после почти восьми лет службы.
- Средний возраст накопителей Toshiba емкостью 4 ТБ (модель: MD04ABA400V) составляет 91,3 месяца. В 2021 году этот диск имеет AFR 2,04%, а в 2022 году он подскочил до 3,13%, включая три отказа диска. Учитывая ограниченное количество дисков и дней вождения для этой модели, если бы в 2022 году произошло только два отказа дисков, AFR составил бы 2,08%, или почти такой же, как в 2021 году.
- Обе эти модели дисков имеют относительно небольшое количество дней вождения, поэтому достоверность показателей AFR является спорной. Тем не менее, оба диска хорошо себя зарекомендовали на протяжении всего срока службы.
Новые модели
В 2022 году мы добавили пять новых моделей, отказавшись от нуля, что дало нам в общей сложности 29 различных моделей, которые мы отслеживаем. Вот пять новых моделей:
- HUH728080ALE604–8 ТБ
- ST8000NM000A–8 ТБ
- ST16000NM002J–16ТБ
- MG08ACA16TA–16ТБ
- WUH721816ALE6L4–16 ТБ
Две модели дисков емкостью 8 ТБ используются для замены неисправных дисков емкостью 8 ТБ. Три модели накопителей емкостью 16 ТБ дополняют ассортимент.
Сравнение статистики дисков за 2020, 2021 и 2022 годы
На приведенной ниже диаграмме сравниваются AFR за каждый из последних трех лет. Данные за каждый год включают только этот год и рабочие модели приводов, представленные на конец каждого года.
Выход из строя привода произошел в 2022 году
После небольшого увеличения AFR с 2020 по 2021 год произошло более заметное увеличение AFR в 2022 году с 1,01% в 2021 году до 1,37%. Что случилось? В наших ежеквартальных отчетах о статистике накопителей за второй квартал 2022 г. и третий квартал 2022 г. мы отметили увеличение общего показателя AFR по сравнению с предыдущим кварталом и объяснили это старением парка накопителей. Но так ли это на самом деле? Давайте рассмотрим некоторые действующие факторы, которые могут вызвать рост AFR в 2022 году. Начнем с размера диска.
Размер диска и сбой диска
На приведенной ниже диаграмме сравниваются AFR 2021 и 2022 для наших больших дисков (которые мы определили как диски емкостью 12 ТБ, 14 ТБ и 16 ТБ) с нашими меньшими дисками (которые мы определили как диски емкостью 4 ТБ, 6 ТБ, 8 ТБ и 10 ТБ).
За исключением дисков емкостью 16 ТБ, AFR каждого размера увеличился с 2021 по 2022 год. В случае с небольшими дисками увеличение было заметным, и 2,12% значительно превышают AFR 1,37% для 2022 года для всех дисков. диски.
Кроме того, хотя на когорту небольших дисков приходится всего 28,7% дней работы в 2022 году, на них приходится 44,5% отказов дисков. Наши меньшие диски выходят из строя чаще, но они также старше, поэтому давайте рассмотрим это подробнее.
Возраст диска и сбой диска
При изучении корреляции возраста диска и отказа диска мы должны начать с нашего предыдущего взгляда на кривую ванны отказа жесткого диска. Там мы пришли к выводу, что диски, как правило, чаще выходят из строя по мере их старения. Чтобы увидеть, имеет ли это значение здесь, мы начнем с таблицы ниже, в которой показан средний возраст каждой модели дисков по размеру.
За исключением дисков Seagate емкостью 8 ТБ (модель: ST8000NM000A), которые мы недавно приобрели в качестве замены вышедшим из строя дискам емкостью 8 ТБ, диски аккуратно попадают в две указанные выше группы — 10 ТБ и меньше и 12 ТБ и выше.
Теперь давайте сгруппируем отдельные модели накопителей в когорты, определяемые размером накопителя. Но прежде чем мы это сделаем, мы должны помнить, что модели дисков емкостью 6 ТБ и 10 ТБ имеют относительно небольшое количество дисков и дисковых дней по сравнению с остальными группами дисков. Кроме того, когорты дисков емкостью 6 ТБ и 10 ТБ состоят из одной модели дисков, а в другие группы дисков входят как минимум четыре разные модели дисков. Тем не менее их исключение кажется неполным, поэтому мы включили таблицы с когортами дисков 6 ТБ и 10 ТБ и без них.
В каждой таблице показано соотношение для каждого размера диска между средним возрастом дисков и связанным с ними AFR. Диаграмма справа (V2) ясно показывает, что старые диски, сгруппированные по размеру, выходят из строя чаще. Это увеличение по мере старения модели привода соответствует кривой ванны, о которой мы говорили ранее.
Итак, что вызвало увеличение отказов дисков и имеет ли это значение?
Старение нашего парка жестких дисков кажется наиболее логичной причиной увеличения AFR в 2022 году. Мы могли бы копнуть глубже, но на данный момент это, вероятно, спорно. Видите ли, мы потратили 2022 год на развитие нашего присутствия в двух новых центрах обработки данных: объекте Nautilus в Стоктоне, штат Калифорния, и объекте CoreSite в Рестоне, штат Вирджиния. Ожидается, что в 2023 году мы сосредоточимся на замене старых дисков на жесткие диски емкостью 16 ТБ и больше. Диски на 4 ТБ и да, даже наш O.G. Диски Seagate емкостью 6 ТБ могут пойти. Мы будем держать вас в курсе.
Отказы дисков по производителям
Мы рассмотрели отказы дисков по возрасту и размеру дисков, поэтому правильнее рассматривать отказы дисков по производителям. Ниже мы нанесли ежеквартальный AFR за последние три года по производителям.
Начиная с первого квартала 2021 г. и до конца 2022 г., мы видим, что общий рост общего показателя AFR за это время, по-видимому, обусловлен Seagate и, в меньшей степени, Toshiba, хотя HGST вносит значительный вклад в первый квартал 2022 г. рост. В случае с Seagate это имеет смысл, поскольку большинство наших дисков Seagate значительно старше, чем диски любых других производителей.
Прежде чем выбросить свои диски Seagate и Toshiba в мусорное ведро, вы можете рассмотреть стоимость жизненного цикла данной модели жесткого диска по сравнению с частотой его отказов. Мы рассмотрели это в нашем отчете о статистике накопителей за третий квартал 2022 года и обрисовали компромиссы между стоимостью накопителей и количеством отказов. Например, в целом диски Seagate дешевле, а частота их отказов в нашей среде обычно выше. Но частота их отказов, как правило, недостаточно высока, чтобы сделать их менее рентабельными в течение всего срока службы. Вы могли бы привести убедительные доводы в пользу того, что для нас многие модели накопителей Seagate так же экономичны, как и более дорогие накопители. Помогает то, что наша платформа облачного хранилища B2 создана с учетом отказа дисков, но мы признаем, что меньшее количество отказов дисков никогда не бывает плохим.
Статистика жесткого диска за весь срок службы
В таблице ниже указан срок службы AFR всех моделей приводов, находящихся в производстве по состоянию на 31 декабря 2022 г.
Текущий показатель AFR за весь срок службы составляет 1,39%, что меньше, чем год назад (1,40%), а также меньше, чем в прошлом квартале (1,41%). AFR за весь срок службы менее подвержен быстрым изменениям из-за временных колебаний отказов накопителя и является хорошим индикатором AFR модели накопителя. Но чтобы быть уверенным в этом, требуется немало наблюдений (в нашем случае — дней езды). С этой целью в приведенной ниже таблице показаны только те модели дисков, которые накопили один миллион дней работы или более за свой срок службы. Мы упорядочили список по дням поездки.
Наконец, мы собираемся здесь немного раскрыться и поделиться результатами 388 дисков, которые мы исключили из нашего анализа, поскольку они были тестовыми дисками или моделями дисков с 60 или менее дисками. Эти диски разделены на 20 различных моделей дисков, и в таблице ниже перечислены модели дисков, которые работали в наших центрах обработки данных по состоянию на 31 декабря 2022 года. Большое предостережение: это всего лишь тестовые диски и так далее, так что будьте осторожны. Мы обычно игнорируем их в отчетах, так что это их шанс проявить себя или нет. Мы с нетерпением ждем ваших комментариев.
Есть много причин, по которым эти накопители дошли до этого момента в карьере Backblaze, но мы сохраним эти истории для другого раза. На данный момент мы просто делимся данными, чтобы быть откровенными, но, безусловно, есть что рассказать. Следите за обновлениями.
