DataCenter Scaleway DC5 (часть 3)

• DataCenter Scaleway DC5 (часть 1)
• DataCenter Scaleway DC5 (часть 2)

На этой картинке спереди DC5 есть 3 камеры:


Будущая док-станция для доставки DC5:


Scaleway установил ограничитель потока воды для подключения к канализации: он не может превышать 5 литров в секунду. В случае штормов бассейн служит буфером и временно наполняет, затем вода попадает в канализацию со скоростью 5 литров в секунду. Это позволяет сдерживать воду, возникающую в результате сильных гроз, и не насыщать канализационные канализационные системы.

Scaleway установил сепаратор углеводородов: возможное загрязнение углеводородов также будет отфильтровано и вызовет тревогу в центре наблюдения.


Генераторы расположены в задней части здания, справа на фотографии, в той части здания, которая была снесена и перестроена.

Небольшая комната, расположенная слева от фотографии, является комнатой для перекачки и раздачи мазута. (другой планируется на другой стороне здания)
Большая белая комната перед центром обработки данных и местный насос / обменник для воды со льдом.


На земле бетонный желоб, закрытый металлическими люками, содержит трубы для подачи топлива 26 генераторов (сегодня установлено только два, а третий поставляется).


Установка очень проста: в каждой комнате есть два выделенных трансформатора на 20 000 Вольт на 1250 кВА, два выделенных генератора на 1315 кВт / 1650 кВА, два выделенных TGBT, четыре выделенных инвертора на 500 кВА, 16 выделенных аккумуляторных отводов


Это группа питания низкого напряжения (400 вольт).Это то же самое, что и Scaleway DC3 работает в течение многих лет и прошел сертификацию институт Tier3 безотказной работу, требующее производство генераторов (не чрезвычайную ситуацию ) может работать без прерывания обслуживания при полной нагрузке и до бесконечности.
DC5 особенность: они могут синхронизировать с сетью Enedis.

Это дает много преимуществ:

• Можно сделать нагрузочное тестирование без прекращения электропитания (зная, что маршрут не спасен, это может повредить разрез для тестовой группы): Генератор подает электросеть без отключить ENEDIS.
• Зимой можно стирать потребление центра обработки данных. В периоды пикового спроса в зимний период, RTE может сделать большой чек клиентов, которые в состоянии очистить их потребление (некоторые промышленные потребители электроэнергии, такие как литейном прекратить к нему DC5 просто вопрос запуска генераторов размера, чтобы работать в непрерывном производстве)

После отключения питания, центр обработки данных не сразу вернуться к сети с временем отсечки коромысла: Блоки питания обеспечивает стабильность, а затем синхронизировать с сетью. После правильной синхронизации, нагрузка передается к сети ENEDIS ИБП и генераторы остановки. (Таким образом, один разрез вместо двух, что представляет большой интерес, так как маршрут не волнистый)

Поставки нефти на снимке, при гибкой форме носит временный характер. A Установка из нержавеющей стали будет выполнена.


Эти генераторы предварительно нагреваются и возобновляют зарядку через 12 секунд. Батареи инвертора могут полностью заряжаться 6 минут в конце срока службы, то есть после 10 лет.

Открытая дверь — это та, где установлен автомат (в группе один автомат)


Контроллер обрабатывает все ошибки, но у него есть режим, который позволяет обойти все меры безопасности «ходи или умри» с риском механического разрушения генератора.

Это позволяет не останавливать работу центра обработки данных из-за проблем с датчиком, блокирующих запуск группы.

Вот автомат, в TGBT депортирован экран для управления или запуска, не выходя из здания. В случае отказа ПЛК возможен режим ручного запуска.



Для будущих комнат уже определены местоположения генераторов (и трансформаторов) и водосточного желоба, который позволяет его подключение:


Как только сайт будет полностью реализован с его 12 комнатами, будет в общей сложности 26 генераторов + 1 дополнительный генератор, который может спасти любой другой неисправный генератор!

Генераторы этапа R + 2 будут размещены с восточной и западной сторон здания.

Со стороны станции доставки Enedis, после того, как дополнительные слоты будут заполнены 12 комнатами, мощность составит 24 МВт.

DC5 станет одним из крупнейших дата-центров Франции.

Scaleway запланировал 2 подземных танка. Только 1 был реализован.
Каждый бак разделен на два независимых тома: каждый том может хранить 40 000 литров мазута.

С 80 000 литров DC5 теперь почти на уровне DC3 (100 000 литров мазута)

Грузовик, который заполняет резервуары, расположен выше этой области разгрузки, которая допускает возможные утечки.


Два люка, обеспечивающие доступ к люку каждого объема 40 000 л:


В комнате, предназначенной для прокачки, есть небольшой шкаф управления / командования:

Насосы дублируются и резервируются для двух объемов бака.


Для каждого объема бака имеется три насоса: один активный, один резервный и один ручной! Мы надеемся, что он никогда не будет использован. Это часть небольшой дополнительной системы безопасности, не обязательно очень дорогой, но может однажды избежать отключения электроэнергии.



Все распределительные трубы в желобах имеют двухслойный, зеленый и черный цвет. Двойная оболочка находится под вакуумом и оснащена модулем обнаружения утечек. Это позволяет контролировать и предупреждать, если линия протекает, не затопляя желоба.


Даже разгрузочные трубы представляют собой двойные шкуры:


У почтового сортировочного центра уже была станция доставки на 20 000 вольт, названная «CENTRIPRO» с прибытием Enedis с двумя ответвлениями, которое было повторно использовано Scaleway. Его мощность составляет 6 МВт (мегаватт)

Планируется изменить дверной проем.

Позже будут установлены три дополнительных пункта доставки, каждый мощностью 6 МВт, чтобы удовлетворить высокие потребности в энергии при установке новых помещений и увеличить мощность площадки до 24 МВт.


Вот схема подключения между станцией доставки 1 и станцией распределения 1 20 000 вольт:


Предохранитель на 63 А (в 20000 В) присутствует в этих элементах для защиты трансформатора 1250 кВА, который находится позади:


В итоге, при построении 12 серверных комнат, на сайте будет 26 трансформаторов.
Будут оборудованы 3 уже построенных распределительных пункта.

Можно будет кормить распределительную станцию любой станцией доставки. Возможны все комбинации, в пределах 6 МВт на точку доставки.


Затем 20 000 вольт поступает к масляным трансформаторам: трансформаторы разделены противопожарной стеной, так что взрыв или пожар трансформатора (да, это уже произошло) не ухудшает его соседи.

Используемые трансформаторы имеют мощность 1250 кВА


Сразу за трансформатором находится выпуск воздуха (избыточное давление) соседнего TGBT с естественным охлаждением:


Этот трансформатор питает помещение оператора и часть производства охлажденной воды:


В этой комнате находятся автоматические выключатели «Masterpack», TGBT, питающий комнату оператора и часть производства охлажденной воды.


Кабели, идущие от трансформатора, уходят под землю и попадают в эту яму:


Schneider Electric MTZ2-20 N1 замыкается менее чем за 70 мс:


Этот тип продукта эволюционировал, сегодня Masterpack предварительно оборудован для получения адресов IPv4 или IPv6 и / или Bluetooth (но по очевидным причинам безопасности Scaleway предпочла не использовать эти варианты связи)


Вот один из двух ТГБТ первой комнаты. В одном горячем коридоре один TGBT.

Каждый TGBT управляет половиной комнаты независимо. Каждый TGBT имеет выделенный трансформатор на 20 000 Вольт на 1250 кВА, выделенную генераторную установку на 1315 кВт / 1650 кВА, 2 выделенных инвертора на 500 кВА и 8 выделенных аккумуляторных отводов.


Для холода, как и для операторской: используется прямое естественное охлаждение (через традиционную холодильную установку), когда температура на улице превышает 25 ° C. Ниже этой температуры наружный воздух впрыскивается непосредственно в помещение после фильтрации.

Когда наружная температура слишком низкая, система будет работать в замкнутом контуре и смешивать рециркулируемый воздух с пропорцией наружного воздуха. Цель состоит в том, чтобы поддерживать температуру 25 ° C ± 2 ° C в TGBT.


Здесь снаружи более 25 ° C: моторизованные регистры возврата горячего воздуха открываются для рециркуляции воздуха и его охлаждения через контур охлажденной воды, причем горячий воздух TGBT свежее, чем наружный воздух:


Когда естественное охлаждение впрыскивает наружный воздух, здесь находится устье, куда он выходит наружу:


TGBT состоит из множества отсеков, заполненных автоматическими выключателями и измерительными инструментами:


Вот батареи, которые обеспечивают питание для двух инверторов 500 кВА TGBT. Каждый инвертор имеет 4 отделения батареи в своем распоряжении.

Каждая ступень батареи состоит из ответвления: это набор из 12-вольтных батарей последовательно для достижения постоянного напряжения 615 вольт.


Используемые батареи: это герметичные свинцово-кислотные батареи AGM SPRINTER XP12V3000 (350 € каждая). При напряжении 12 вольт каждый из них имеет емкость 92,8 Ач при 25 ° С.

Аккумуляторы этого типа оптимизированы для использования в режиме постоянной зарядки с чрезвычайно быстрой разрядкой. Его обычная мощность для 10-минутного разряда составляет 3040 Вт при 25 ° C. Срок его службы 10 лет.

Почему всегда указывать температуру? Потому что емкость батареи уменьшается с температурой.

Почему бы не хранить аккумуляторы при температуре 30 ° C (холодная комнатная температура серверного помещения) в течение всего года, чтобы обеспечить дополнительную автономность? Потому что чем выше температура, тем короче срок службы батареи и тем больше ее необходимо регулярно заменять.


Как минимум 6 минут. Эта длительность рассчитывается в наиболее неблагоприятном случае: полная мощность (6 кВт / средний отсек) и батареи в конце срока их службы, то есть через 10 лет.

4 отделения батареи подключены к 4 переключателям (расположены в нижней части отсека). Они позволяют изолировать ответвление в случае неисправной батареи или заменить ответвление. В случае сбоя питания во время работы другие 3 ветви могут удерживать нагрузку, но с меньшей автономностью.

Верхняя часть стойки состоит из плавкого предохранителя и инвертора на 500 кВА (каждый инвертор имеет свой отсек и 4 выделенных отделения батареи).


Здесь мы видим, что Арно симулирует отказ всех батарей: когда фотография была сделана, центр обработки данных имитировал отключение питания и работает на генераторе. Это позволяет проверять реакцию автомата, который должен выйти из режима онлайн, и без перерыва переключать нагрузку непосредственно на генераторную установку.


Ты знаешь что это? Это 4 предохранителя по 650 ампер для 4-х ветвей батарей. Кабель используется для контроля, если предохранитель перегорел и цепь разомкнута.


Вот электронная схема слева от автоматического выключателя, которая сама защищена двумя предохранителями.


Эта электроника позволяет собирать данные о различных датчиках температуры, которые расположены рядом с батареями. Температура — это параметр, используемый для оптимизации плавающего тока и оптимизации времени зарядки.


Вот один из двух 500 кВА инверторов TGBT:



Обычно дисплей позволяет увидеть нагрузку (ниже 310 кВА) и узнать, какая цепь запитана.
Эко-режим позволяет избежать двойного преобразования при нормальной работе (при наличии сети и в пределах допусков):
Нагрузка питается от автоматического байпаса. Обычная сеть питает батарею, но инвертор не вырабатывает энергию.


Ниже у нас смоделировано отключение электроэнергии, и центр обработки данных работает на генераторе. Инвертор форсирует режим двойного преобразования для обеспечения безопасности. В этом режиме доходность составляет 94%
В «Эко-режиме» выход близок к 99,9% при полной загрузке.


Ниже преобразователь сообщает два аварийных сигнала: «1» и «2», которые связаны с байпасом для технического обслуживания:


Детали двух сигналов тревоги доступны:


Вы помните, что на DC5 волнообразно только одна полоса движения. Что происходит в случае сбоя питания во время вмешательства, которое требует перевести ИБП в режим байпаса?

DC5 включает в себя 24 TGBT (трансформатор / группа / аккумуляторы / инверторы) для 12 комнат + 1 операторские / холодильные камеры TGBT и 1 TGBT «HQR» (замена высокого качества): это возможно через полосовую оболочку под названием HQR для повторной подачи не гофрированного канала из абсолютно независимого гофрированного производства, включая: 1 трансформатор + 1 генератор + 2 инвертора, одинаковой мощности и предназначенные для этого аварийного филиала HQR. Таким образом, вмешательство в неисправную гофрированную цепочку может происходить без риска прерывания обслуживания серверов. Это независимое гофрированное производство объединено для всех 24 TGBT в центре обработки данных.

Шкафы TGBT имеют упрощенные схемы, которые позволяют увидеть, что находится под напряжением.

Ниже мы сталкиваемся с перебоями в питании, и именно GE (генератор) питает установку.


Вот удаленный вид контроллера, который управляет генератором:


Тот же экран доступен в генераторе, но наличие удаленного дисплея исключает необходимость перемещения на улицу.

Здесь генератор работает отлично: напряжение (трехфазное) составляет ровно 400 В, частота — 50,0 Гц. Группа заряжается на 65 кВт, а двигатель работает на 1500 об / мин. Диаграмма показывает части, которые являются живыми:



Это не оборудование с процессором / оперативной памятью / флэш-памятью, а арифметическая и логическая единица, которая читает в цикле свои регистры и аккумуляторы. Поэтому это очень надежное оборудование.


Экран подключен к Ethernet и объединяет процессор, флэш-память и оперативную память для управления графическим интерфейсом:


Арно имитирует поломку, разделяя электрическое прибытие автомата:


Затем на экране отображается потеря соединения:


Но в случае сбоя в ПЛК возможно использование ухудшенного режима для ручного управления переключателями и генератором:


DGHQ супер обходной переключатель:



Центральный для измерения мощности на 4-х штабе. Каждая дорожка питает стержень стержня EAE Voltadis, расположенный в горячем проходе: в вытяжной камере горячего воздуха имеется 4 кожуха стержня HQ: два справа и два слева, каждый из которых соединяет отсек на половину длины комнаты.



Это выключатель, а не автоматический выключатель: он не отключает ток, если он превышен. Эта функция уже выполнена в другом месте схемы.


Кабели соединяются с вытяжной галереей горячего воздуха через потолок (конец галереи находится чуть выше TGBT)


TGBT также питает некоторые вспомогательные контуры, чтобы иметь второй источник для очистки воды. Эти цепи снабжены замком для предотвращения ошибочного ввода в эксплуатацию.


Видимый здесь экран — это смещение экрана контроллера, который управляет вентиляционной установкой компьютерного зала, что позволяет настроить все, не переходя на другой конец здания.