Люди:

• Сегодня на место прибыли группы HR, чтобы поддержать команды.
• Дополнительные производственные и технические группы прибыли из других офисов и центров обработки данных, чтобы усилить персонал на месте и предоставить конкретные знания.
• Логистические и продовольственные услуги были предоставлены всем командам на объекте.
• Создан временный офис.
• Мы усилили персонал французской производственной площадки (Croix) внутренними волонтерами для выполнения текущего производственного плана и дополнительной рабочей нагрузки, вызванной инцидентом в Страсбурге.
• Производство будет осуществляться в расширенное рабочее время и в выходные дни.

Производство и дата-центры:

• Мы начали предлагать нашим клиентам замену инфраструктуры (выделенные серверы, размещенное частное облако и общедоступное облако) в центрах обработки данных Roubaix и Graveline.
• Для удовлетворения спроса в ближайшие 48 часов будут построены дополнительные сборочные линии. Это утроит наши производственные мощности.
• На сайте Страсбурга:
• Выполняется диагностика и инвентаризация.
• Мы находимся в процессе очистки и ремонта поврежденных зданий, чтобы гарантировать безопасные условия труда для наших бригад.
• Мы закончили убирать с улицы пену для тушения и воду. Сегодня мы удалим воду из резервуара для воды.
• SBG2 необходимо будет почти полностью реконструировать.
• SBG1 был сильно поврежден.
• После предварительного аудита сетевая комната SBG1 будет восстановлена ​​в начале следующей недели.
• Предварительная дата восстановления электроснабжения — понедельник, 15 марта.
• В ближайшие дни серверы будут активированы комната за комнатой после аудита.
• SBG4: предварительные проверки не выявили проблем. Сейчас наша цель — восстановить электроэнергию в течение 12-й недели, а затем постепенно снова активировать все службы.
• SBG3 не пострадал от пожара. Мы стремимся восстановить электропитание и сеть в течение 12-й недели, а затем постепенно повторно активировать все услуги.

Наши три приоритета остаются следующими:

• 1. Зарезервируйте инфраструктуры в других наших центрах обработки данных для затронутых нами клиентов: у нас есть запас новых серверов на площадках Рубе и Гравелин, готовые к доставке большинству затронутых клиентов. Мы продолжим повышать доступность этих центров обработки данных, выпуская в ближайшие недели около 10 000 новых серверов. Пострадавшие клиенты будут уведомлены об этом как можно скорее.
• 2. Защитите сайт теперь, когда мы восстановили доступ, очистите его и повторно подключите электричество и сеть для трех затронутых центров обработки данных.
• 3. Продолжать оценивать влияние на серверы наших клиентов в затронутых центрах обработки данных, чтобы найти лучшие решения и связаться со всеми клиентами.

Дополнительные действия, предпринимаемые OVHcloud:

Сеть:

• Все оптоволоконные пути, которые входят в сайт центра обработки данных, находятся в рабочем состоянии.
• Мы разместили заказы у разных поставщиков — срок доставки на место 11 марта.

Коммуникация:

• Сегодня мы отправим прямые электронные письма всем затронутым клиентам.
• Опубликованы часто задаваемые вопросы: help.ovhcloud.com/en/faq/strasbourg-incident/
• Чтобы следить за обновлениями в режиме реального времени:
• Нашим основным средством коммуникации остается «Tâche Travaux».
• Октав Клаба опубликует видео в ответ на ситуацию.
• Аккаунт Октава Клабы в Twitter @olesovhcom.
• Официальное заявление будет опубликовано завтра, 12 марта.
• Twitter: twitter.com/ovhcloud

Наша миссия — предоставлять нашим клиентам услуги высочайшего качества для поддержки их онлайн-активности, и мы знаем, насколько это важно для них. Мы искренне приносим свои извинения за проблемы, вызванные этим пожаром. Мы продолжим сообщать с максимальной прозрачностью о причинах пожара и его последствиях.

Расследование продолжается. Независимо от причины инцидента, OVHcloud в настоящее время оценивает потенциальные технические и операционные меры, направленные на предоставление решений пострадавшим клиентам.

Пожар на нашем страсбургском объекте — мониторинг ситуации и свежая информация.
По состоянию 03/10/2021 — 9 часов вечера (CET)

Напомним факты:

• Пожар произошел в среду, 10 марта 2021 года, в 12:47 в комнате одного из 4 центров обработки данных OVHcloud, расположенных в Страсбурге (называемых SBG2).
• Огонь тушили ранним утром.
• Нет никаких травм, о которых следует сожалеть.
• Пожар в основном уничтожил датацентр SBG2 и частично повредил датацентр SBG1 (4 комнаты из 12 разрушены). Два других дата-центра OVHcloud в Страсбурге не пострадали от пожара; серверы SBG3 и SBG4 в настоящее время отключены, но не пострадали.
• Сайт не подпадает под классификацию Севезо.
• Причина этого пожара выясняется, и начато расследование, санкционированное властями.

Действия, предпринятые OVHcloud:

• Техническая и коммерческая команды были мобилизованы с сегодняшнего утра, чтобы проинформировать наших клиентов и компенсировать недоступность нашего сайта в Страсбурге.
• Октав Клаба, основатель компании, находится на месте с сегодняшнего утра вместе с производственными и техническими группами.
• Чтобы следить за развитием ситуации в режиме реального времени:
• Рабочее задание: travaux.ovh.net/?do=details&id=49484
• Twitter: twitter.com/OVHcloud_FR
• Связь с клиентами, сопровождаемая «FAQ», будет доступна с завтрашнего дня.
• Чтобы упростить обработку запросов клиентов, мы рекомендуем им создавать билеты на нашем сайте или обращаться в наш справочный центр.

Наши три приоритета:

• Зарезервируйте инфраструктуры в других наших центрах обработки данных для пострадавших клиентов: на площадках Рубе и Гравелин у нас есть запас новых серверов, готовых к доставке большинству пострадавших клиентов. Мы еще больше повысим доступность этих центров обработки данных, выпуская в ближайшие недели около 10 000 новых серверов. О процедуре будет сообщено затронутым клиентам как можно скорее.
• Защитите сайт, к которому у нас теперь есть доступ, очистите его, а затем восстановите электричество и сеть для трех пострадавших центров обработки данных.
• Продолжайте вместе с нашими клиентами оценивать влияние на их услуги, расположенные в соответствующих центрах обработки данных, чтобы найти наилучшие решения.

Мы прилагаем все усилия для обеспечения непрерывности обслуживания наших клиентов:

• Мы работаем над планом по скорейшему возрождению трех незатронутых (SBG3 и SBG4) или частично поврежденных (SBG1) центров обработки данных, а также нашей сети.
• Мы призываем наших клиентов внимательно относиться к полученным электронным письмам: во время кризиса количество злонамеренных попыток (фишинг, спам, вымогательство и т. Д.) Увеличивается. Как никогда необходимо сохранять бдительность.

Влияние на нашу деятельность:

• Мы продолжаем оценивать влияние этого инцидента, особенно для клиентов, данные которых были размещены в нашем центре обработки данных, уничтоженном пожаром.
• Наши веб-сервисы VOIP во Франции не пострадали.
• Все наши услуги в других центрах обработки данных во Франции и по всему миру (включая 15 ЦОД в Европе) полностью готовы к работе.

Наша миссия — предложить нашим клиентам оптимальное качество услуг для поддержки их онлайн-активности, и мы знаем, насколько это важно для них. Мы приносим им наши искренние извинения за те страдания, которые причиняет им этот пожар. Поэтому мы стремимся регулярно и с максимальной прозрачностью сообщать о причинах и последствиях.

Мы оцениваем воздействие на окружающую среду, работая с соответствующими органами и следуя процедуре подтверждения отсутствия загрязнения.

На этом этапе мы можем подтвердить, что жители не подвергаются риску.

Мы постоянно оцениваем влияние этого инцидента и будем сообщать в кратчайшие сроки с максимальной прозрачностью о ходе нашего анализа и реализации решений.

Все наши каналы связи, начиная с нашей платформы мониторинга инцидентов, доступны, чтобы держать вас в курсе развития ситуации в режиме реального времени.

Рабочее задание: travaux.ovh.net/?do=details&id=49484

С 10.03.2021 — 11.00 (CET)
В эту среду, 10 марта 2021 года, в 0:47, произошел пожар в комнате одного из наших 4 центров обработки данных в Страсбурге, SBG2. Обращаем ваше внимание на то, что этот сайт не подлежит строгой классификации.

Пожарные немедленно вмешались на месте, чтобы защитить команды и ограничить распространение пожара. Таким образом, они приступили к полной изоляции участка и его периметра с 2ч54. В 4:09 пожар уничтожил SBG2 и продолжал представлять опасность для близлежащих центров обработки данных, пока пожарные не взяли под свой пожар полный контроль. С 5:30 утра сайт был недоступен для наших команд по очевидным причинам безопасности под контролем префектуры. Огонь теперь локализован. Мы рады, что не следует сожалеть о травмах ни среди наших бригад, ни среди пожарных и служб префектуры, которых мы благодарим за их образцовую мобилизацию на нашей стороне.

Благодаря нашему операционному парку из 15 центров обработки данных в Европе, наши технические и коммерческие группы полностью инвестируют в поддержку наших клиентов, внедрение решений и устранение проблем с недоступностью нашего сайта в Страсбурге. Наша миссия — предложить нашим клиентам оптимальное качество услуг для поддержки их онлайн-активности, и мы знаем, насколько это важно для них. Мы приносим им наши искренние извинения за страдания, которые им причиняет этот пожар. Поэтому мы стремимся с максимальной прозрачностью сообщать о его причинах и последствиях.

В настоящее время мы оцениваем влияние этого инцидента и в кратчайшие сроки сообщим с максимальной прозрачностью о ходе нашего анализа и реализации решений, доступны, чтобы держать вас в курсе в режиме реального времени о развитии ситуации.

В настоящее время в нашем центре обработки данных в Страсбурге произошел серьезный инцидент, связанный с пожаром в здании SBG2.
Пожарные немедленно прибыли на место происшествия, но не смогли справиться с возгоранием в SBG2.
Весь сайт был изолирован, что влияет на все наши услуги на SBG1, SBG2, SBG3 и SBG4.
Если ваше производство находится в Страсбурге, мы рекомендуем активировать план аварийного восстановления.
Все наши бригады полностью мобилизованы вместе с пожарными.
Мы будем держать вас в курсе по мере поступления дополнительной информации.

Wednesday, 10 March 2021, 13:31PM
Пожар на нашем сайте в Страсбурге

В 00:47 в среду, 10 марта 2021 года, возник пожар в комнате одного из наших 4 центров обработки данных в Страсбурге, SBG2. Обратите внимание, что этот сайт не относится к категории «Севезо».
Пожарные немедленно вмешались, чтобы защитить наши команды и предотвратить распространение огня. В 2:54 они изолировали площадку и перекрыли ее периметр.
К 4:09 пожар уничтожил SBG2 и продолжал представлять опасность для близлежащих центров обработки данных, пока пожарная команда не взяла под контроль пожар.
С 5:30 утра сайт был недоступен для наших групп по очевидным причинам безопасности под руководством префектуры. Огонь теперь локализован.

Мы рады, что никто не пострадал ни среди наших бригад, ни среди пожарных, ни среди служб префектуры, которых мы благодарим за их образцовую мобилизацию на нашей стороне.

Имея 15 центров обработки данных в Европе, наши технические и коммерческие группы полностью сосредоточены на поддержке наших клиентов, внедрении решений и смягчении последствий недоступности нашего сайта в Страсбурге. Наша миссия — предоставлять нашим клиентам услуги высочайшего качества для поддержки их онлайн-активности, и мы знаем, насколько это важно для них. Мы искренне приносим свои извинения за трудности и проблемы, вызванные этим пожаром. Мы обязуемся и дальше сообщать с максимальной прозрачностью о причинах пожара и его последствиях.
В настоящее время мы оцениваем влияние этого инцидента и будем максимально прозрачно сообщать о ходе нашего анализа и реализации решений.

Статус Страсбургского центра обработки данных

• SBG1: Сетевая комната в порядке — 4 комнаты разрушены — 8 комнат в порядке
• SBG2: Уничтожен
• SBG3: UPS Down — проверка сервера еще продолжается
• SBG4: Нет физического воздействия

Сегодня нет перезапуска для SBG1, SBG3 и SBG4

План на следующие 2 недели:

• 1) Реконструкция 20кВ для SBG3
• 2) Восстановление 240 В в SBG1 / SBG4
• 3) Проверка DWDM / маршрутизаторов / коммутаторов в сетевой комнате A (SBG1).
• Проверка волокон Париж / Франкфурт
• 4) Реконструкция сетевого помещения B (SBG5) для проверки волокна Париж / Франкфурт

Мы будем держать вас в курсе по мере развития ситуации.





travaux.ovh.net/?do=details&id=49484

Wednesday, 10 March 2021, 17:26PM
Технические группы OVH готовят и отправляют оборудование, необходимое для создания временной сетевой комнаты. Это оборудование будет отправлено в центр обработки данных в Страсбурге в одночасье.
Поступление волокна на объект контролировалось и не пострадало от пожара.
Восстановление электроснабжения площадок SBG1 и SBG4 намечено на понедельник, 15 марта. Восстановление после SBG3 ожидается к пятнице 19 марта.