Дата-центры OVH

SBG-1

• Ситуация: Центр обработки данных не активирован повторно. После осмотра опытными командами технические группы могут получить доступ к комнатам.
• Перезапуск сервера: перемещение восстанавливаемых серверов после проверки и очистки в другие наши центры обработки данных: Gravelines (GRA), Roubaix (RBX), Croix (CRX) и Strasbourg (SBG4) для возврата к работе.
• После очистки серверы будут перезагружены к середине недели 29 марта. (1)

SBG-2

• Ситуация: датацентр выключен и защищен.
• Перезагрузка сервера: замена инфраструктуры в других центрах обработки данных: Gravelines (GRA), Roubaix (RBX), Лондон (LON), Варшава (WAW), Франкфурт (FRA)

SBG-3

• Ситуация: Датацентр работает с 18 марта.
• Электрический перезапуск / Сеть: выполнено
• Перезагрузка сервера: начато восстановление сервисов VPS, Public Cloud, Bare Metal Cloud, Hosted Private Cloud, Veeam Cloud Connect и Veeam Managed Backup. (2).

SBG-4

• Ситуация: центр обработки данных работает.
• Электрический перезапуск: выполнен
• Перезагрузка сети: завершена
• Перезагрузка сервера: 100% клиентских серверов Bare Metal доступны.

SBG1: комнаты от A до D:
o Серверы будут переведены в стойки в SBG4 с запланированным возвратом в эксплуатацию со среды 30/03.
SBG1: залы 61E и 62E:

• Команды работают по очереди, чтобы очистить все серверы, расположенные в этих комнатах, в течение выходных, и будут завершены к вторнику 30/03 в Круа.
• Очищенные и протестированные серверы будут затем возвращены в различные центры обработки данных (RBX, GRA, SBG4) и установлены в их новых стойках.
• Планируется, что услуги будут постепенно возобновлены с четверга 01/04 по пятницу 02/04.

SBG3: ожидается, что работы по очистке всех серверов Bare Metal будут завершены к среде 31/03.

26/03/2021
Обновленная информация о количествах, поставленных с 10.03:

• — Оголенный метал
• + Bare Metal — серверы — Количество: 6987
• + NAS-HA — TB — Количество: 259
• — Публичное облако
• + VPS — VM — Количество: 16087
• — Размещенное частное облако
• + Хост — серверы — Количество: 840
• + Хранилище данных
• + Количество Zpool: 764
• + Объем ТБ: 4158

27/03/2021
Обновленная информация о количествах, поставленных с 10.03:

• — Оголенный метал
• + Bare Metal — серверы — Количество: 7217
• + NAS-HA — TB — Количество: 259
• — Публичное облако
• + VPS — VM — Количество: 16337
• — Размещенное частное облако
• + Хост — серверы — Количество: 870
• + Хранилище данных
• + Количество Zpool: 796
• + Объем ТБ: 4532

28/03/2021
Обновленная информация о поставках с 10 марта:

• — Оголенный метал
• + Bare Metal — серверы — Количество: 7484
• + NAS-HA — TB — Количество: 259
• — Публичное облако
• + VPS — VM — Количество: 16557
• — Размещенное частное облако
• + Хост — серверы — Количество: 887
• + Хранилище данных
• + Количество Zpool: 813
• + Объем ТБ: 4698

Мы добавили пропущенные серверы в кластер и начали копировать данные, чтобы получить по 3 копии каждого из них. Надеемся, что это будет сделано сегодня. В любом случае, как только это будет сделано, мы помещаем кластер в RO и начинаем перестраивать 30% SBG2 VPS из платной резервной копии.

• Серверы SBG1 61E / 62E находятся в процессе очистки.
• Скорость — 3 стойки в сутки.
• У нас 32 стойки. Ищем, как это ускорить.
• Последний этап процесса — обнаружение остатков «хлора».

Информация для клиентов:

• SBG1: восстанавливаемые серверы Bare Metal проходят очистку, чтобы снова ввести их в эксплуатацию в Страсбурге или других центрах обработки данных к началу следующей недели (после проверки и очистки).
• SBG3 находится в рабочем состоянии.
• SBG4 работает: 95% серверов Bare Metal доступны для клиентов.

SBG3

• Публичное облако:
• + Инстанс публичного облака — 86% *
• + Публичное облачное хранилище — перезапуск 27 марта
• Размещенное частное облако: службы постепенно перезапускаются, в зависимости от их первоначальной конфигурации, по круглосуточному графику ротации 24/7.
• Veeam Cloud Connect: с вечера 25 марта сервисы будут постепенно перезапускаться.
• Baremetal Cloud
• + VPS: 83% *
• + Голый металл: 71% *

SBG4

• Baremetal Cloud
• + Чистый металл: 95% *
• * Восстановление услуг осуществляется в соответствии с графиком перезапуска комната за комнатой, проход за проходом и стойка за стойкой. Однако требуется очистка сервера, и это определит, когда определенные стойки будут снова введены в эксплуатацию. Узнайте больше о нашем процессе очистки по этой ссылке www.linkedin.com/posts/octave-klaba-3a0b3632_update-march24-630pm-the-cleaning-takes-activity-6780540963271000064-8Q7i

SBG-1

• Ситуация: Центр обработки данных не активирован повторно. После осмотра опытными командами технические группы могут получить доступ к комнатам.
• Перезапуск сервера: перемещение восстанавливаемых серверов после проверки и очистки в другие наши центры обработки данных: Gravelines (GRA), Roubaix (RBX), Croix (CRX) и Strasbourg (SBG4) для возврата к работе.
• Цель — восстановить услуги с начала недели 29 марта.

SBG-2

• Ситуация: датацентр выключен и защищен.
• Перезагрузка сервера: замена инфраструктуры в других центрах обработки данных: Gravelines (GRA), Roubaix (RBX), Лондон (LON), Варшава (WAW), Франкфурт (FRA)

SBG-3

• Ситуация: Датацентр работает с 18 марта.
• Электрический перезапуск: выполнен
• Перезагрузка сети: завершена
• Перезагрузка сервера: в настоящее время восстанавливаются сервисы VPS, Bare Metal и Public Cloud. Услуги размещенного частного облака будут постепенно восстанавливаться.

SBG-4

• Ситуация: центр обработки данных работает.
• Электрический перезапуск: выполнен
• Перезагрузка сети: завершена
• Перезагрузка сервера: 95% клиентских серверов Bare Metal доступны.

Обновленная информация о поставках с 10 марта:

• Облачная вселенная:
• — Оголенный метал
• + Bare Metal — серверы — Количество: 6812
• + NAS-HA — TB — Количество: 259
• — Публичное облако
• + VPS — VM — Количество: 15732
• — Размещенное частное облако
• + Хост — серверы — Количество: 723
• + Хранилище данных
• + Количество Zpool: 706
• + Объем ТБ: 4079

• SBG4 находится в рабочем состоянии.
• SBG3 полностью готов к работе, ниже представлен статус служб, расположенных в этом центре обработки данных:

Публичное облако:

• + Инстанс публичного облака — 86% *
• + Публичное облачное хранилище — перезапуск 27 марта
• Размещенное частное облако: службы постепенно перезапускаются, в зависимости от их первоначальной конфигурации, по круглосуточному графику ротации 24/7.
• + VPS: 83% *
• + Голый металл: 71% *

SBG-1

• — Ситуация: Центр обработки данных не активирован повторно. После осмотра опытными командами технические группы могут получить доступ к комнатам.
• — Перезапуск сервера: перемещение серверов SBG1 в другие наши центры обработки данных: Gravelines (GRA), Roubaix (RBX), Croix (CRX) и Strasbourg (SBG4) для возврата к работе. Расчетное время прибытия: среда, 24 марта.

SBG-2

• — Ситуация: датацентр выключен и защищен.
• — Перезагрузка сервера: замена инфраструктуры в других центрах обработки данных: Gravelines (GRA), Roubaix (RBX), Лондон (LON), Варшава (WAW), Франкфурт (FRA)

SBG-3

• Ситуация: Датацентр работает с 18 марта.
• Электрический перезапуск: выполнен
• Перезагрузка сети: завершена
• Перезагрузка сервера: в настоящее время восстанавливаются сервисы VPS, Bare Metal и Public Cloud. Услуги размещенного частного облака будут постепенно восстанавливаться.

SBG-4

• Ситуация: центр обработки данных работает.
• Электрический перезапуск: выполнен
• Перезагрузка сети: завершена
• Перезапуск сервера: расчетное время прибытия: сегодня, среда, 24 марта.

Обновленная информация о поставках с 10 марта:

• — Оголенный метал
• + Bare Metal — серверы — Количество: 6334
• + NAS-HA — TB — Количество: 259
• — Публичное облако
• + VPS — VM — Количество: 15425
• — Размещенное частное облако
• + Хост — серверы — Количество: 676
• + Хранилище данных
• + Количество Zpool: 677
• + Объем ТБ: 3811

Связь
Новое видео от Октава Клаба, основателя OVHcloud, доступно в его аккаунте в Twitter (https://twitter.com/olesovhcom/status/1374069154085490690).
Платформа сообщества OVHcloud теперь доступна для взаимодействия с членами сообщества и поддержки вас => community.ovh.com/en/
FAQ доступен здесь => help.ovhcloud.com/en-gb/faq/strasbourg-incident/
Чтобы следить за обновлениями об этой ситуации в режиме реального времени:
Наша основная лента сообщений: Статус задачи
Октав Клаба, основатель аккаунта OVHcloud в Twitter => twitter.com/olesovhcom/status/1374069154085490690
OVHcloud Twitter: twitter.com/ovhcloud

Наша миссия по-прежнему заключается в предоставлении нашим клиентам услуг высочайшего качества для поддержки их онлайн-бизнеса, и мы знаем, насколько это важно для них. Приносим искренние извинения за возможные неудобства, связанные с данной ситуацией. В настоящее время проводится расследование причин. Какой бы ни была причина инцидента, OVHcloud в настоящее время оценивает возможные технические и операционные меры, чтобы предложить решения всем затронутым клиентам.

Доступны все наши каналы связи, включая нашу платформу отслеживания инцидентов, чтобы вы могли быть в курсе событий в режиме реального времени.

Мы перезапускаем DC. Также мы начали перенос серверов с SBG1 61AD / 62AD.

Слева материнская плата с задымлением на разъеме процессора. Это очень едко! Если мы включим, он мертв. Это же диск. Справа то же устройство через 24 часа после очистки.

SBG3 полностью готов к работе, ниже представлен статус служб, расположенных в этом центре обработки данных:

Публичное облако:

• + Инстанс публичного облака — 86%
• Размещенное частное облако: службы постепенно перезапускаются, в зависимости от их первоначальной конфигурации, по круглосуточному графику ротации 24/7.
• Облако Голого Металла:
• + VPS: 79%
• + Голый металл: 71%

Восстановление услуг выполняется в соответствии с графиком перезапуска комната за комнатой, проход за проходом и стойка за стойкой. Поскольку безопасность наших технических бригад должна быть гарантирована, этот график обусловлен протоколом безопасности, определенным для вмешательств на месте.



SBG-1

• — Ситуация: Центр обработки данных не активирован повторно. После осмотра опытными командами технические группы могут получить доступ к комнатам.
• — Перезапуск сети: отключен в качестве меры предосторожности.
• — Перезапуск сервера: перемещение серверов SBG1 в другие наши центры обработки данных: Gravelines (GRA), Roubaix (RBX), Croix (CRX) и Strasbourg (SBG4) для возврата к работе. Расчетное время прибытия: среда, 24 марта.

SBG-2

• — Ситуация: датацентр выключен и защищен.
• — Перезагрузка сервера: замена инфраструктуры в других центрах обработки данных: Gravelines (GRA), Roubaix (RBX), Лондон (LON), Варшава (WAW), Франкфурт (FRA)

SBG-3

• — Ситуация: Датацентр работает с 18 марта.
• — Электрический перезапуск: выполнен
• — Перезагрузка сети: завершена
• — Перезагрузка сервера: в настоящее время восстанавливаются сервисы VPS, Bare Metal и Public Cloud. Услуги размещенного частного облака будут постепенно восстанавливаться.

SBG-4

• — Ситуация: дата-центр будет работать в среду, 24 марта.
• — Электрический перезапуск: электричество восстановлено сегодня вечером 23 марта.
• — Перезагрузка сети: перезапуск сети 24 марта.
• — Перезапуск сервера: расчетное время прибытия: среда, 25 марта.

Обновленная информация о поставках с 10 марта:

• — Оголенный метал
• + Bare Metal — серверы — Количество: 6103
• + NAS-HA — TB — Количество: 259
• — Публичное облако
• + VPS — VM — Количество: 14973
• — Размещенное частное облако
• + Хост — серверы — Количество: 640
• + Хранилище данных
• + Количество Zpool: 662
• + Объем ТБ: 3764

В связи с текущим спросом сроки доставки наших услуг для изделий из чистого металла могут быть дольше, чем обычно. Наши команды полностью мобилизованы, и мы прилагаем все усилия, чтобы доставить их нашим клиентам как можно быстрее, особенно всем пострадавшим клиентам.
С другой стороны, услуги Public Cloud, Web Cloud и VPS предоставляются в обычном режиме во всех центрах обработки данных.

Связь
Новое видео от Октава Клаба, основателя OVHcloud, доступно в его аккаунте в Twitter twitter.com/olesovhcom/status/1374069154085490690
Платформа сообщества OVHcloud community.ovh.com/en/ теперь доступна для взаимодействия с членами сообщества и поддержки вас.
Часто задаваемые вопросы доступны здесь help.ovhcloud.com/en-gb/faq/strasbourg-incident/
Чтобы следить за обновлениями об этой ситуации в режиме реального времени:
Наша основная лента сообщений: Статус задачи
Октав Клаба, основатель OVHcloud, аккаунт в Twitter twitter.com/olesovhcom/status/1374038409707188231
OVHcloud Twitter: twitter.com/ovhcloud

Наша миссия по-прежнему заключается в предоставлении нашим клиентам услуг высочайшего качества для поддержки их онлайн-бизнеса, и мы знаем, насколько это важно для них. Приносим искренние извинения за возможные неудобства, связанные с данной ситуацией. В настоящее время проводится расследование причин. Какой бы ни была причина инцидента, OVHcloud в настоящее время оценивает возможные технические и операционные меры, чтобы предложить решения всем затронутым клиентам.

В центре обработки данных SBG3 команды продолжают работать круглосуточно, чтобы постепенно повторно активировать услуги.
Текущее состояние сервисов, расположенных в SBG3:

• Публичное облако
• + Экземпляр публичного облака: перезагрузка — 22 марта
• Размещенное частное облако
• + Размещенное частное облако: перезагрузка — 22 марта
• Голое Металлическое Облако
• + VPS: 68%
• + Голый металл: 21%

Мониторинг перезапуска SBG по помещениям и стойкам в реальном времени доступен по адресу: status.ovh.com/vms/sbg/
В начале недели все заинтересованные клиенты получили сообщение о коммерческих мерах, которые будут применяться к их ситуации. Вы можете найти специальный раздел об этом в FAQ help.ovhcloud.com/en-gb/faq/strasbourg-incident/commercial-measures/

SBG-1

• Ситуация: проверка и экспертиза в процессе.
• Перезапуск сети: отключен в качестве меры предосторожности.
• Перезапуск сервера: перемещение серверов в другие центры обработки данных (Gravelines (GRA), Roubaix (RBX) и Strasbourg (SBG4)) до перезапуска служб.

SBG-2

• Ситуация: датацентр выключен и защищен.
• Перезагрузка сервера: замена инфраструктуры в других центрах обработки данных Gravelines (GRA), Roubaix (RBX), Лондон (LON), Варшава (WAW), Франкфурт (FRA)

SBG-3

• Ситуация: центр обработки данных работает.
• Электрический перезапуск: выполнен
• Перезагрузка сети: завершена
• Перезагрузка сервера: сервисы Bare Metal VPS в настоящее время восстанавливаются. Услуги Hosted Private Cloud и Public Cloud будут постепенно восстанавливаться с завтрашнего дня (см. Статус выше).

SBG-4

• Ситуация: после осмотра и проверки этот центр обработки данных возобновит работу в среду, 24 марта.
• Электрический перезапуск: работа по подаче питания
• Перезапуск сети: отключен в качестве меры предосторожности.
• Перезапуск сервера: расчетное время прибытия: среда, 24 марта.

Обновленная информация о поставках с 10 марта:

• — Оголенный метал
• + Bare Metal — серверы — Количество: 5558
• + NAS-HA — TB — Количество: 259
• — Публичное облако
• + VPS — VM — Количество: 14327
• — Размещенное частное облако
• + Хост — серверы — Количество: 616
• + Хранилище данных
• + Количество Zpool: 747
• + Объем ТБ: 3706

В связи с текущим спросом сроки доставки наших услуг для изделий из чистого металла могут быть дольше, чем обычно. Наши команды полностью мобилизованы, и мы прилагаем все усилия, чтобы доставить их нашим клиентам как можно быстрее, особенно всем пострадавшим клиентам.
С другой стороны, услуги Public Cloud, Web Cloud и VPS предоставляются в обычном режиме во всех центрах обработки данных.

Связь
Платформа сообщества OVHcloud теперь доступна для взаимодействия с членами сообщества и поддержки вас.
FAQ доступен здесь => help.ovhcloud.com/en-gb/faq/strasbourg-incident/.
Чтобы следить за обновлениями об этой ситуации в режиме реального времени:
Наша основная лента сообщений: Статус задачи.
Аккаунт Октава Клабы в Twitter: twitter.com/olesovhcom
OVHcloud Twitter: twitter.com/ovhcloud

Наша миссия по-прежнему заключается в предоставлении нашим клиентам услуг высочайшего качества для поддержки их онлайн-бизнеса. Мы знаем, насколько это важно для них. Приносим искренние извинения за любые неудобства, связанные с этой ситуацией. В настоящее время проводится расследование причин. Какой бы ни была причина инцидента, OVHcloud в настоящее время оценивает возможные технические и эксплуатационные меры, чтобы предложить решения всем затронутым клиентам.

SBG1:

• Мы не планируем перезапускать SBG1. Навсегда.
• Серверы в 61A / D + 62A / D будут перемещены в SBG4.
• Серверы в 61E / 62E будут перемещены в Croix и очищены, а затем перезапущены в RBX / GRA.

SBG4:

• работает от питания + сеть от SBG3. Затем перезапускаем SBG4.

SBG3:

• В DC работает 60 техников. мы очищаем серверы и перезапускаем.
• Все органы власти (пожарные, префектура, полиция, страховые компании, эксперты и т.д.) Очень поддерживают и понимают важность перезапуска ДЦ. Все делают лучше.

UPDATE
SBG3:

• Больше стоек ВВЕРХ. 60 технических специалистов работают в SBG3. 24/24. Нам помогают 2 компании, специалисты по очистке серверов после пожара.

SBG4:

• Новый кабель питания будет подключен от SBG3 к SBG4.

SBG1:

• работают над планом по переносу серверов на RBX / GRA + SBG4.

travaux.ovh.net/vms/index_sbg3.html