13-03-2021 log sbg

Информация о клиенте:
1 — Статус сервера

• Мы разослали всем нашим клиентам электронные письма, информируя их о статусе их услуг.

2 — Коммерческие действия

• Выставление счетов было приостановлено для клиентов центра обработки данных в Страсбурге (SBG) с даты инцидента.
• Каждому затронутому клиенту были изложены коммерческие меры.
• Подробная информация о том, как эти меры будут реализованы, будет отправлена ​​на следующей неделе и будет применяться, в частности, к мартовским счетам за затронутые услуги, которые уже были выпущены до 10 марта.
• Мы обновили FAQ.

Наши три приоритета следующие:

• Приоритет 1: восстановление услуг для SBG1, SBG3 и SBG4
• Приоритет 2: предоставление инфраструктуры в других центрах обработки данных для затронутых нами клиентов.
• Приоритет 3: Внедрение всех механизмов DRP (плана аварийного восстановления) с нашими клиентами.

План действий:
Приоритет №1:

• Сводка состояния для каждого центра обработки данных

SBG-1

• Ситуация: 4 номера из 12 повреждены
• Электрический перезапуск: с понедельника, 15 марта.
• Перезагрузка сервера: постепенное восстановление неповрежденных серверов до 22 марта.

SBG-2

• Ситуация: здание не используется
• Электрооборудование: Аудит и инвентаризация помещений.
• Перезагрузка сервера: замена инфраструктуры в других центрах обработки данных

SBG-3

• Ситуация: серверы не повреждены
• Электрический перезапуск: в эти выходные будут проведены испытания источника высокого напряжения. Предварительный перезапуск 15 марта
• Перезапуск сервера: прогрессивный перезапуск всех служб ожидается с понедельника, 22 марта.

SBG-4

• Ситуация: серверы не повреждены
• Электрический перезапуск: запланирован на понедельник, 15 марта.
• Перезапуск сервера: прогрессивный перезапуск всех служб ожидается с понедельника, 22 марта.

• Мобильные высоковольтные сети и энергоблоки прибыли на площадку в Страсбурге сегодня в 12:00.
• 60 экспертов в настоящее время работают на объекте (поочередно в выходные дни) в четырех группах, выполняющих следующие задачи:

1. Команде 1 (сети) поручено подключить модуль мобильной сети и протестировать сетевую комнату в SBG1.
2. Бригада 2 (электричество) работает на высоковольтных электрических соединениях.
3. Бригада 3 (электричество) работает над подключением к электросети низкого напряжения.
4. Команда 4 работает над защитой и восстановлением систем охлаждения.

Цель состоит в том, чтобы повторно подключить, восстановить питание и перезапустить магистральную сеть доступа с понедельника, 15 марта (после получения разрешения ESR (Électricité de Strasbourg Réseaux)).
Чтобы обновить сайт:

• Два генератора были арендованы с 11/03 для питания временного офиса.
• Один дополнительный генератор был арендован для подзарядки батарей наших генераторов после их активации во время инцидента.

В настоящее время на объекте работают несколько поставщиков услуг (30 человек)

• Вода на полу здания SBG3 была очищена.
• Здание SBG3 в настоящее время осушается, которое должно быть завершено к вечеру воскресенья.
• Очистка серверных помещений SBG3 от сажи начнется в понедельник.

Ремонт поврежденной системы охлаждения:

• На площадку прибыл кран.

Приоритет №2:

• Для клиентов, которых это затронуло, мы предлагаем заменяющие инфраструктуры (Bare Metal, Hosted Private Cloud и Public Cloud) в наших центрах обработки данных Roubaix (RBX) и Gravelines (GRA).
• Мы намерены предоставить около 15 000 новых серверов в ближайшие недели.

Обновленная информация о количествах, поставленных с 10/03:
Облачная вселенная:

• + Baremetal
• + Чистый металл — DS — Количество: 3083
• + NAS-HA — TB — Количество: 195
• + Публичное облако
• + VPS — VM — Количество: 5936
• + Размещенное частное облако
• + Хост — DS — Количество: 207
• + Хранилище данных
• + Количество Zpool: 205
• + Объем ТБ: 1772

Приоритет № 3:
Механизмы резервного копирования:

• Обзор всех механизмов резервного копирования будет опубликован сегодня в FAQ.
• Для клиентов Public Cloud и VPS вопросы о «зоне и центре обработки данных (SBG)» будут разъяснены в разделе часто задаваемых вопросов сегодня.
• Имеется специальный механизм, который помогает нашим клиентам настроить свою систему DRP.

Связь
Часто задаваемые вопросы доступны по следующей ссылке: help.ovhcloud.com/en-gb/faq/strasbourg-incident/
Чтобы следить за обновлениями об этой ситуации в режиме реального времени:
Нашим основным средством коммуникации остается «Статус задачи».
Статусные видео доступны здесь:
— FR: twitter.com/olesovhcom/status/1370045226929299461
— EN: twitter.com/olesovhcom/status/1370045891806175232
Аккаунт Октава Клабы в Twitter: twitter.com/olesovhcom
OVHcloud Twitter: twitter.com/ovhcloud

Наша миссия по-прежнему заключается в том, чтобы предоставлять нашим клиентам услуги высочайшего качества, поддерживать их онлайн-бизнес. И мы знаем, насколько это важно для них. Мы искренне приносим свои извинения за проблемы, вызванные этим пожаром. Мы продолжим сообщать с максимальной прозрачностью о причине пожара и его последствиях.

Расследование продолжается. Какой бы ни была причина инцидента, OVHcloud в настоящее время оценивает возможные технические и эксплуатационные меры, чтобы предложить решения всем затронутым клиентам.