DataCenter Scaleway DC5 (часть 4)

Scaleway Хостинг
8 февраля 2019, 20:05

DC5 также является местом, где собираются различные серверные массивы Scaleway, которые отправляются в различные центры обработки данных в Иль-де-Франсе и Амстердаме.

Вот несколько пустых ягод, ожидающих на сайте:

А вот несколько поддонов серверов:

Запас серверов:

Запас мелких компонентов жесткие диски, SSD, SDRAM DDR4, SFP +, XFP, QSFP

В верхней части залива мы находим домашний переключатель:

Его маленькое имя «Chouchou». Он объединяет 48 портов меди 1 Гбит / с (без 2,5 Гбит / с Ethernet, как я думал когда-то) + две клетки для QSFP 40 Гбит / с каждый.
Вот его материнская плата, разработанная командами Scaleway.

Вот бухта, которая пойдет по Амстердаму. Неиспользуемые помещения останутся неиспользованными, потому что в Амстердаме мы будем превышать доступную электроэнергию на каждый залив.

Вы думаете, что эти небольшие серверы 1u объединяют 4 диска? Ошибка!

На передней панели уже есть 4 твердотельных накопителя с возможностью горячей замены:

На задней панели снова есть два твердотельных накопителя с возможностью горячей замены:

И когда мы открываем фронт, мы обнаруживаем 12 жестких дисков по 12 ТБ каждый или 144 ТБ!

Вот как извлечь диск:

В первой комнате DC5 было несколько отсеков. Серверы не подключены к сети, они просто загружают и тестируют различные сценарии Scaleway.

Обратите внимание, что отсеки имеют колеса, видимые на этом фото, чтобы облегчить установку и удаление в конце срока службы.

Dell PowerEdge C6400 — это 4 двухпроцессорных сервера и хранилище большой емкости в формате стойки всего 2U.

Блок стойки (символ U) обозначает стандартную высоту электронного оборудования, предназначенного для установки в стойку. Высота стойки составляет 1,75 дюйма (44,45 мм). Здесь высота корпуса Dell составляет 8,9 см.

Каждый сервер имеет 6 выделенных слотов для дисков (24 слота для каждого 2u шасси)

Scaleway предоставляет для этой системы 2 твердотельных накопителя MVNe объемом 1 ТБ каждый и твердотельный накопитель SATA объемом 120 ГБ. Для каждого сервера доступны 3 дополнительных слота для установки дополнительных дисков.

4 сервера независимы: есть 4 кнопки для включения серверов. Слева находятся кнопки для серверов 1 и 2, а справа — кнопки для серверов 3 и 4.

Этот тип сервера в конфигурации высокого класса (2x Xeon Gold 5120 — это 28 ядер и 56 потоков, 384 ГБ DDR4 ECC, 4x 1 ТБ SSD NVMe, пропускная способность Premium 750 Мбит / с), арендованная 450 € HT в месяц,

Этот тип сервера Dell способен отлично работать в холодном коридоре при 40 ° C:

Каждый сервер имеет два выделенных соединения 1 Гбит / с: одно для Интернета и одно для RPN.
RPN — это частная выделенная сеть, подключенная ко второму интерфейсу каждого сервера.

Только один блок питания способен обеспечить питание 4 серверов, то есть 8 процессоров с каждыми 28 ядрами (всего 224 ядра в формате 2u!)

Каждый сервер подключен:
— Имеет два блока питания (для резервирования)
— Белый кабель Ethernet: доступ в Интернет со скоростью 1 Гбит / с через коммутатор Scrouchou Scaleway (и удаленное управление через iDRAC9 Enterprise (встроенный в сервер IP KVM, имеющий собственный IP-адрес)
— Синий кабель Ethernet: сеть RPN 10 Гбит / с через коммутатор Cisco Nexus. Сеть «RPN» является частной сетью, в которой используются вторые сетевые карты компьютеров, и которая не зависит от сети общего пользования.

Этот коммутатор агрегирует данные коммутатора отсеков. Он оснащен 64 клетками QSFP28 40 или 100 Гбит / с и 2 клетками SFP + 10 Гбит / с. Оптоволокно, поступающее из отсеков, имеет скорость 40 Гбит / с, что по сравнению с текущими значениями является слишком большим (коммутаторы, к которым подключены серверы, имеют 48 портов 1 Гбит / с), тогда как те, которые подключаются к магистрали, имеют скорость 100 Гбит / с. s.

Каждый из этих высококлассных коммутаторов включает 32 ГБ оперативной памяти и 256 ГБ твердотельный накопитель.В таблице MAC-адресов обрабатывается 92 000 записей. Два 1200-ваттных блока питания снабжают коммутатор резервированием в случае потери питания. Разъем питания отличается от обычных разъемов, потому что он может превышать 10 ампер при 110 вольт. Типичное потребление, указанное в документации производителя, составляет 429 Вт.

4 Задняя панель Cisco Nexus N9K C9364C: (Вы не можете чувствовать, но вентиляторы очень мощные и шумные)

Scaleway использует домашние серверы для облака. Сайт Scaleway говорит:

Созданный и для Scaleway, чтобы предложить лучшую ценность в мире. Серверы Scaleway BareMetal предназначены для обеспечения максимальной плотности и эффективности. Разработка и производство наших собственных серверов позволяют нам оптимизировать наши расходы. Мы тщательно подбираем каждый компонент наших серверов, чтобы получить качественные серверы по лучшей цене. Мы проектируем и создаем облачные серверы и предлагаем лучшее соотношение цены и качества в мире.

Почему Scaleway использует 14 серверов с одним процессором, а не 7 серверов с двумя процессорами?

Соотношение производительности и стоимости будет более интересным для 14 однопроцессорных серверов, чем для 7 двухпроцессорных серверов.
Действительно, цена процессора одинакова при одинаковой мощности, если он ограничен для работы на одном, двух или четырех процессорных серверах.

Вот как эти серверы выглядят перед этими домашними серверами:

Физически, где Dell размещает 4 двухпроцессорных сервера в корпусе 2U, Scaleway размещает 14 монопроцессоров (называемых узлами) в корпусе 3u: 3 платы по 2 сервера слева и 4 платы по 2 сервера справа. По умолчанию эти серверы не имеют локальных дисков и загружаются с сетевого диска.

Когда снимается правая передняя крышка, имеется 4 материнские платы, каждая из которых имеет два отдельных процессора ЦП, оснащенных 2 портами SATA на сервер, для локального подключения до 2 SSD на сервер (это называется «Direct SSD»). на сайте Scaleway)

Процессор из серии Denvorton (см. Https://ark.intel.com/products/codename/63508/Denverton), который может работать только в моно-процессоре.

Серверы называются «узлами», и на каждом сервере имеется 2 канала памяти, каждая из которых может устанавливать полосу DDR4 на канал или 2 микросхемы DDR4 на сервер.

На передней панели также есть ЖК-экран с подсветкой, который позволяет увидеть, какой из 14 серверов включен, аварийные сигналы,…
Вы должны прокрутить вниз, чтобы получить доступ к другим 7 серверам.

Со стороны сети, в отличие от Dell, которому требуется 8 сетевых кабелей на шасси из 4 серверов (4 для RPN и 4 для доступа в Интернет), здесь есть внутренний коммутатор для подключения 14 серверов. С кабелями потребуется 28 кабелей Ethernet!

Серверы подключены к этому коммутатору со скоростью 2,5 Гбит / с для Интернета и со скоростью 2,5 Гбит / с для RPN. Это объясняет упоминание «Внутренняя пропускная способность 5 Гбит / с» на веб-сайте Scaleway.
Ethernet со скоростью 2,5 Гбит / с является развитием новейшего стандарта Ethernet, который следует демократизировать:

Шасси подключено к нему со скоростью 20 Гбит / с для RPN и 20 Гбит / с для Интернета. Риск перегрузки невелик: 14 карт Ethernet на серверах 2,5 Гбит / с обеспечивают максимальный трафик 35 Гбит / с.

Медный порт RJ45 также подключен, вероятно, для администрации.

Задняя часть этих серверов с двойным источником питания для резервирования.

Пространство слева и справа от блоков питания позволяет подключить жесткий диск или твердотельный накопитель к портам SATA серверов, которые находятся сзади: можно проложить кабели SATA в обход вентиляторов.

На этом рисунке мы ясно видим 7 материнских плат, каждая из которых оснащена двумя независимыми серверами.
Три мощных вентилятора обеспечивают охлаждение всего.
В центре есть свободное место с тем, что выглядит как компоненты коммутатора Ethernet 14x 2,5 Гбит / с с восходящей линией связи 2x10 Гбит / с: