Datacenter SBG
В настоящее время в нашем центре обработки данных в Страсбурге произошел серьезный инцидент, связанный с пожаром в здании SBG2.
Пожарные немедленно прибыли на место происшествия, но не смогли справиться с возгоранием в SBG2.
Весь сайт был изолирован, что влияет на все наши услуги на SBG1, SBG2, SBG3 и SBG4.
Если ваше производство находится в Страсбурге, мы рекомендуем активировать план аварийного восстановления.
Все наши бригады полностью мобилизованы вместе с пожарными.
Мы будем держать вас в курсе по мере поступления дополнительной информации.
Wednesday, 10 March 2021, 13:31PM
Пожар на нашем сайте в Страсбурге
В 00:47 в среду, 10 марта 2021 года, возник пожар в комнате одного из наших 4 центров обработки данных в Страсбурге, SBG2. Обратите внимание, что этот сайт не относится к категории «Севезо».
Пожарные немедленно вмешались, чтобы защитить наши команды и предотвратить распространение огня. В 2:54 они изолировали площадку и перекрыли ее периметр.
К 4:09 пожар уничтожил SBG2 и продолжал представлять опасность для близлежащих центров обработки данных, пока пожарная команда не взяла под контроль пожар.
С 5:30 утра сайт был недоступен для наших групп по очевидным причинам безопасности под руководством префектуры. Огонь теперь локализован.
Мы рады, что никто не пострадал ни среди наших бригад, ни среди пожарных, ни среди служб префектуры, которых мы благодарим за их образцовую мобилизацию на нашей стороне.
Имея 15 центров обработки данных в Европе, наши технические и коммерческие группы полностью сосредоточены на поддержке наших клиентов, внедрении решений и смягчении последствий недоступности нашего сайта в Страсбурге. Наша миссия — предоставлять нашим клиентам услуги высочайшего качества для поддержки их онлайн-активности, и мы знаем, насколько это важно для них. Мы искренне приносим свои извинения за трудности и проблемы, вызванные этим пожаром. Мы обязуемся и дальше сообщать с максимальной прозрачностью о причинах пожара и его последствиях.
В настоящее время мы оцениваем влияние этого инцидента и будем максимально прозрачно сообщать о ходе нашего анализа и реализации решений.
Статус Страсбургского центра обработки данных
План на следующие 2 недели:
Мы будем держать вас в курсе по мере развития ситуации.
travaux.ovh.net/?do=details&id=49484
Wednesday, 10 March 2021, 17:26PM
Технические группы OVH готовят и отправляют оборудование, необходимое для создания временной сетевой комнаты. Это оборудование будет отправлено в центр обработки данных в Страсбурге в одночасье.
Поступление волокна на объект контролировалось и не пострадало от пожара.
Восстановление электроснабжения площадок SBG1 и SBG4 намечено на понедельник, 15 марта. Восстановление после SBG3 ожидается к пятнице 19 марта.
Пожарные немедленно прибыли на место происшествия, но не смогли справиться с возгоранием в SBG2.
Весь сайт был изолирован, что влияет на все наши услуги на SBG1, SBG2, SBG3 и SBG4.
Если ваше производство находится в Страсбурге, мы рекомендуем активировать план аварийного восстановления.
Все наши бригады полностью мобилизованы вместе с пожарными.
Мы будем держать вас в курсе по мере поступления дополнительной информации.
Wednesday, 10 March 2021, 13:31PM
Пожар на нашем сайте в Страсбурге
В 00:47 в среду, 10 марта 2021 года, возник пожар в комнате одного из наших 4 центров обработки данных в Страсбурге, SBG2. Обратите внимание, что этот сайт не относится к категории «Севезо».
Пожарные немедленно вмешались, чтобы защитить наши команды и предотвратить распространение огня. В 2:54 они изолировали площадку и перекрыли ее периметр.
К 4:09 пожар уничтожил SBG2 и продолжал представлять опасность для близлежащих центров обработки данных, пока пожарная команда не взяла под контроль пожар.
С 5:30 утра сайт был недоступен для наших групп по очевидным причинам безопасности под руководством префектуры. Огонь теперь локализован.
Мы рады, что никто не пострадал ни среди наших бригад, ни среди пожарных, ни среди служб префектуры, которых мы благодарим за их образцовую мобилизацию на нашей стороне.
Имея 15 центров обработки данных в Европе, наши технические и коммерческие группы полностью сосредоточены на поддержке наших клиентов, внедрении решений и смягчении последствий недоступности нашего сайта в Страсбурге. Наша миссия — предоставлять нашим клиентам услуги высочайшего качества для поддержки их онлайн-активности, и мы знаем, насколько это важно для них. Мы искренне приносим свои извинения за трудности и проблемы, вызванные этим пожаром. Мы обязуемся и дальше сообщать с максимальной прозрачностью о причинах пожара и его последствиях.
В настоящее время мы оцениваем влияние этого инцидента и будем максимально прозрачно сообщать о ходе нашего анализа и реализации решений.
Статус Страсбургского центра обработки данных
- SBG1: Сетевая комната в порядке — 4 комнаты разрушены — 8 комнат в порядке
- SBG2: Уничтожен
- SBG3: UPS Down — проверка сервера еще продолжается
- SBG4: Нет физического воздействия
План на следующие 2 недели:
- 1) Реконструкция 20кВ для SBG3
- 2) Восстановление 240 В в SBG1 / SBG4
- 3) Проверка DWDM / маршрутизаторов / коммутаторов в сетевой комнате A (SBG1).
- Проверка волокон Париж / Франкфурт
- 4) Реконструкция сетевого помещения B (SBG5) для проверки волокна Париж / Франкфурт
Мы будем держать вас в курсе по мере развития ситуации.
travaux.ovh.net/?do=details&id=49484
Wednesday, 10 March 2021, 17:26PM
Технические группы OVH готовят и отправляют оборудование, необходимое для создания временной сетевой комнаты. Это оборудование будет отправлено в центр обработки данных в Страсбурге в одночасье.
Поступление волокна на объект контролировалось и не пострадало от пожара.
Восстановление электроснабжения площадок SBG1 и SBG4 намечено на понедельник, 15 марта. Восстановление после SBG3 ожидается к пятнице 19 марта.
10 комментариев
Сервера ещё были доступны 15-25 минут после того как температура выросла, очевидно что за это время оптика бы погорела, но по факту выросла только температура и загрузка проца.
До этого пару дней сеть сильно лагала и падала.
Что если это новый вид ддоса, который смог обойти защиту OVH и загрузил одновременно все процессоры? OVH используют во всех серверах сетевые карты intel, которые могут загрузить минимум 4 ядра, и соответственно потребление всего ЦОДа улетело в небо на что очевидно он не был рассчитан и загорелись силовые кабеля?
twitter.com/obzorly/status/1366571819721973761
и про силовые кабеля тоже правда
hosting.kitchen/ovh/tehnicheskoe-obsluzhivanie---zamena-elektricheskogo-kabelya.html
они купили бракованную партию
и меняли их который месяц
Мимо юзер GRA
Но это чёт за гранью фантастики атаковать гейм серверы, чтобы поджечь целый ЦОД/
Для публичного облака регионы OpenStack, непосредственно затронутые возгоранием, следующие: openstack-sbg1, openstack-sbg2, openstack-sbg3 и openstack-sbg4 (физически в центре обработки данных SBG2). Области openstack-sbg5 и openstack-sbg6 недоступны (физически в центре обработки данных SBG3), но они будут снова введены в эксплуатацию, как только SBG3 заработает.
не часто выпадает случай такую гамму цветов заскринить
копируем для истории
Вставка изображения
Оставить комментарий