Рост любой компании сопровождается ростом ИТ-инфраструктуры. А если ты — облачный провайдер, то инфраструктуры очень много. И нагрузка на неё тоже высокая. Когда нам стало тесно в границах используемых ЦОД, мы решили построить собственный — под рабочим названием DC4Y.1-Марфино. Сегодня расскажем о том, как началось строительство собственного дата-центра Cloud4Y и каким он должен стать.

Зачем провайдеру собственный дата-центр и чем это грозит
Собственный дата-центр даёт облачному провайдеру полный контроль над всей инфраструктурой, включая питание, охлаждение, климатические системы, резервирование и физическую безопасность. Это позволяет минимизировать риски, связанные с зависимостью от внешних подрядчиков, и обеспечить максимальную отказоустойчивость на всех уровнях: от аппаратных решений до инфраструктуры электроснабжения. Провайдер получает возможность разрабатывать собственные стандарты безопасности, контроля и оперативности обслуживания, адаптированные к специфическим потребностям клиентов.

Такой подход делает провайдера единственным ответственным за качество услуг, что повышает доверие клиентов. Более того, собственный ЦОД открывает дополнительные бизнес-возможности: сдача в аренду серверных стоек, предоставление места для размещения оборудования заказчиков и возможность предлагать гибридные решения, сочетающие облачные сервисы и физическую инфраструктуру.

Важное преимущество заключается и в снижении зависимости от других провайдеров ЦОД, что уменьшает риски простоев и повышает отказоустойчивость. Кроме того, обладающий собственным дата‑центром облачный провайдер может улучшить клиентский сервис, предлагая индивидуальные решения и снижая время отклика на запросы.

Казалось бы, одни плюсы. Так почему для облачных провайдеров обычное дело сотрудничать с ДЦ, арендовать стойки и ставить там своё оборудование? Всё дело в специализации.

Для облачного провайдера управление ЦОДом — это отдельное направление бизнеса, требующее квалифицированных специалистов и специфических знаний. Часто провайдеры сталкиваются с нехваткой опыта и кадров, что приводит к распылению собственных ресурсов. Вместо фокусировки на развитии облачных услуг, компания вынуждена обучать сотрудников работе с инфраструктурой и инженерными системами, что повышает риск разного рода инцидентов из-за человеческого фактора. Это может негативно сказаться как на работе самого ЦОДа, так и на качестве облачных сервисов.

Кроме того, постройка и содержание собственного ЦОДа сопряжены с большими тратами. Требуется не только возведение здания, но и внедрение сложных инженерных систем: бесперебойного электропитания, промышленных систем охлаждения, пожаротушения, мониторинга, контроля доступа и т. д. Кроме того, необходима сертификация всех процессов, что требует согласования с регуляторами.

Даже после ввода в эксплуатацию ЦОД требует постоянных инвестиций в модернизацию оборудования, регламентные работы и мониторинг, чтобы поддерживать уровень отказоустойчивости и соответствие современным требованиям.

По этой причине многие провайдеры предпочитают аренду ЦОД, а не строительство своего. Это позволяет снизить капитальные затраты, избежать рисков, связанных с управлением инженерной инфраструктурой, и сосредоточиться на главной задаче — развитии и предоставлении облачных услуг. До собственного дата‑центра нужно «дозреть». Cloud4Y — уже 15 лет предлагает облачные сервисы, поэтому вопрос строительства собственного ЦОД назревал. И вот — свершилось.

Местоположение
DC4Y.1-Марфино — современный технологический объект, расположенный в Московской области, село Марфино. После строительства ему присвоят официальное название — TerraBit

ЦОД располагается на участке площадью более 8,2 га в 22 км от МКАД, в непосредственной близости от транспортных узлов. Этот участок долгое время эксплуатировался, но уже несколько десятков лет как заброшен.




Поэтому место тихое и красивое, но здесь хватает старого хлама, который нужно выкапывать, выкорчёвывать и вывозить. Хорошо, что объект обеспечен удобными подъездными путями. А ещё предусмотрено место для складских зон для временного хранения оборудования клиентов, которые будут размещаться здесь в будущем.

Кстати, во время расчистки территории мы начали облагораживать маленький естественный прудик, который был на территории и который решили оставить. Он в ужасном состоянии, но благодаря источнику, бьющему из-под земли, сумел дожить до наших ней. Да, из-за пруда мы немного перекроим проект (сейчас как раз ведутся проектировочные работы), зато он будет ещё более красивым. В пруд ещё рыбу запустим, и совсем хорошо станет.




Новый дата-центр Cloud4Y в Подмосковье должен стать важным элементом региональной ИТ-инфраструктуры, способствуя развитию цифровой экономики региона. Близость к Москве и хорошая транспортная доступность обеспечат поддержку местных предприятий, малого и среднего бизнеса, а также госучреждений, которым необходимы производительные ресурсы для обработки данных. Создание ЦОД в Марфино также открывает новые рабочие места для технических специалистов, что способствует экономическому развитию региона.

Структура и мощности дата-центра
Проект реализуется и будет вводиться в эксплуатацию поэтапно

• Этап 1: 1200 стойкомест, до 10 МВт мощностей на площади 5,5 тыс. кв. м.
• Этап 2: 2400 стойкомест, до 20 МВт мощностей, 11 тыс. кв. м.
• Этап 3: 3600 стойкомест, до 30 МВт, 16,5 тыс. кв. м.
• Этап 4: 4800 стойкомест, до 40 МВт на 22 тыс. кв. м.

Все системы объекта имеют резервирование от уровня N+1 до 2N, что обеспечивает надёжность и отказоустойчивость. Дата-центр разработан с учётом международных требований и нацелен на сертификацию уровня TIER III и TIER IV от Uptime Institute.

Энергоснабжение и системы охлаждения
Объект запитывается от городских электросетей, а также имеет резервные ИБП и дизель-генераторы, что позволяет работать автономно. Топливохранилище на территории обеспечит длительную бесперебойную работу при необходимости. Системы холодоснабжения разработаны с использованием «зелёных» технологий, что позволяет минимизировать воздействие на окружающую среду и повысить энергоэффективность.

Противопожарные и охранные системы
ЦОД оборудован современными системами противопожарной защиты:

• Использование негорючих материалов и изоляция пожароопасных зон.
• Системы раннего оповещения и пожарной сигнализации.
• Газовое пожаротушение, обеспечивающее надёжную защиту оборудования.

Предусмотрена круглосуточная служба безопасности территории и объекта с несколькими периметрами контроля и охраны. Также у нас в проекте заложено создание антидроновой защиты (в частности, укреплённые стены и противодроновые сетки) систем ЦОД. Важный пункт, особенно в наше неспокойное время.

Услуги и возможности для клиентов
Основные услуги, которые будут реализованы на базе ЦОД:

• Традиционные облачные ИТ-услуги (облачные серверы и сервисы)
• Размещение ИТ-оборудования клиента в надёжной инженерной инфраструктуре.
• Услуги связи.
• Предоставление ИТ-оборудования в аренду.
• Услуги по сопровождению ИТ-инфраструктуры заказчика.

50+ IaaS & SaaS решений, среди которых:

• Облачные сервера в отказоустойчивом исполнении с работой в нескольких ЦОД
• Решение «Облако ФЗ-152», аттестованное по 17 и 21 приказам ФСТЭК по классам УЗ-1, К-1
• Решения аварийного восстановления, резервного копирования
• Решения облачного хранения (Объектное хранилище S3, файлообменник NextCloud)
• Решения SaaS (удалённые рабочие столы, корпоративная почта в облаке, 1С в облаке, решения облачного видеонаблюдения и др.)
• Решения безопасности (VPN, WAF, NGFW, защита от DDoS, DLP – решение, AntiSpam, AntiVirus и др.)

Сервисы предоставляются по модели подписки с оплатой по факту потребления (pay-as-you-go).

Ещё одно направление — это размещение ИТ-оборудования на стандартных стойкоместах в машзалах ЦОД. Условия:

• Место для установки серверной стойки 19”, высота 48 юнитов, габариты 600х1070
• Гарантированная электрическая мощность от 5 до 20кВт
• Два независимых электрических ввода (линии к стойке, внутризальные шкафы, ИБП, ДГУ, ТП).
• Бесперебойное электроснабжение в машзале, поддержание климата с температурой 18-27град, влажностью 30-60%.
• Ограничение несанкционированного доступа и физическая безопасность.
• Возможность установки 2/4 блоков распределителя питания PDU.
• Возможность установки АВР.
• Выделенный сервис-менеджер.
• Базовый уровень технической поддержки 24/7.
• Доступ 24/7 и неограниченное количество посещений.
• Временное рабочее место для подготовки к установке и настройке ИТ-оборудования.
• Временное предоставление консольного оборудования.
• Круглосуточный ввоз-вывоз оборудования.

Дополнительные услуги:

• Аренда стойки (в том числе с нестандартными габаритами), установка системы управления доступом (СКУД) и видеонаблюдения (ОВН).
• Услуги удалённого мониторинга и управления.
• Аренда и монтаж ИТ-оборудования, замена замков под индивидуальные ключи, а также установка системы холодного коридора.
• Установка защитного ограждения вокруг стоек клиента.
• Аренда ДатаРум или места хранения оборудования и ЗИП.

Сервисные услуги:

• Поддержка клиентов в режиме 24/7.
• Услуги SmartHands для помощи в базовых операциях.
• Монтаж оборудования клиента в стойку.
• Сборка и тестирование серверного оборудования.
• Мониторинг, резервное копирование, инвентаризация и техническое обслуживание оборудования.

Сетевая связность и телекоммуникации
Для обеспечения высокой пропускной способности DC4Y.1-Марфино проектирует независимые волоконно-оптические линии (ВОЛС) до МКАД. Синхронизация с планами региональных и федеральных операторов связи позволит дата-центру поддерживать стабильные и высокоскоростные соединения в северном направлении Московской области.

Что сейчас уже сделано
Прямо сейчас, как мы уже сказали, идёт расчистка территории и демонтаж старых построек. Поэтому выглядит всё несколько грязновато:



Проект находится на начальном этапе. Мы уже успели поставить забор, аккуратный КПП с переговорками, а также пробили несколько скважин глубиной 125 м для будущего водоснабжения дата-центра.



Когда закончим с расчисткой, начнём заниматься коммуникациями, фундаментом и другими задачами.

На данный момент на участке почти завершены работы по сносу старых построек и выравниванию земли. Это важный шаг, который определит успех всего проекта, ведь именно от качества подготовки территории зависит долговечность и надёжность будущего сооружения.

Но снос — это не просто разрушение. Многие кажущиеся небольшими постройки оказались буквально «зарыты в землю»: у них были большие подвалы и сложные фундаменты. Вот как это выглядит:


Ломать, крушить и рвать на части
Это не строчка из песни, а краткое описание того, что происходит на нашей стройплощадке. После экспертизы и многочисленных обсуждений внутри Cloud4Y и с экспертами решили, что снесём почти все здания, которые есть на участке.

На это есть две главные причины.

Первая причина: здания, которые мы решили сносить, находились в разном техническом состоянии. Некоторые выглядели так:

А другие — так:


Вторая причина: невозможность как‑либо приспособить их под наши нужды. Старые постройки не соответствовали никаким нормам, предъявляемым к современным дата‑центрам.

Одновременно со сносом организована переработка строительного мусора. После сноса здания образовавшиеся материалы (бетон, кирпич, крупные булыжники) перемалываются в камнедробилке, образуя курганы мелкой щебёнки.


Зачем это делать вообще?
Тут несколько причин.

• Экономия ресурсов. Переработка строительных отходов позволяет повторно использовать материалы, что снижает затраты на их утилизацию и покупку новых.
• Создание устойчивого основания. Перемолотые в крошево здания используются для отсыпки территории. Они уплотняют грунт, улучшают дренаж и создают прочное основание для будущих построек.
• Экологическая польза. Такая переработка сокращает количество отходов, которые попадают на свалки, и уменьшает нагрузку на окружающую среду.
• Снижение затрат на логистику. Переработка и переиспользование материалов на месте строительства уменьшает необходимость в транспортировке новых материалов, что выгодно в плане бюджета и позволяет уменьшить сроки строительства.

Отсыпка дроблёным материалом помогает создать пористую структуру, способствующую хорошему дренажу, предотвращает возможные проблемы с усадкой грунта. Повышается устойчивость, обеспечивается равномерное распределение нагрузки на грунт, соблюдаются другие требования, предъявляемые к такого рода сооружениям.



Подготовка территории включает не только расчистку участка от растительности и мусора с последующим уплотнением грунта для повышения его несущей способности, но и прокладку дренажной системы, чтобы избежать затопления во время дождей или паводков. А ещё подведение инженерных коммуникаций, включая электричество, водоснабжение и интернет.

С дренажом и коммуникациями работа ещё только начинается, поэтому сейчас показывать фактически нечего. Вот ещё пара кадров с места событий:



Помимо строительных работ, мы продолжаем заниматься покупкой начального комплекта оборудования, чтобы уже в этом году запустить первые стойки с серверами. Они будут размещены к модульных контейнерах вроде такого:


Позднее, когда закончим постройку зданий и укомплектуем его, основная часть оборудования будет расположена именно в защищённом здании. Хотя контейнеры на 10 стойкомест, скорее всего, останутся. Впрочем, подробнее о контейнерах мы расскажем в следующий раз.

Также уже сейчас мы настраиваем системы видеонаблюдения, которые будут обеспечивать контроль территории.

Строительство ведётся в соответствии с графиком, и уже в ближайшие месяцы начнётся монтаж ключевых систем. Открытие объекта планируется в следующем году. Вот только знаете, что? Мы вошли во вкус и купили в Мытищах участок под второй дата-центр на пару гектар. На первом объекте будем набивать шишки, а со вторым всё должно получиться попроще. Ну, мы на это рассчитываем.

Ранее мы подняли тему КЦОД — контейнерных дата-центров, которые первыми у нас примут рабочую нагрузку. У вас возникли вопросы, поэтому сегодня расскажем, что это такое, как выглядит и почему мы используем КЦОД вместе с традиционным зданием дата-центра.



Что такое контейнерный дата-центр?
Контейнерный дата-центр — это автономный модуль, размещённый в специализированном металлическом контейнере, подготовленном к эксплуатации оборудования в конкретных климатических условиях и оснащённом всем необходимым оборудованием для хранения, обработки и передачи данных. В контейнерном дата-центре размещаются стойки с ИТ-оборудованием, системы охлаждения, источники бесперебойного питания (ИБП), системы безопасности и мониторинга. КЦОД можно легко перевозить по обычным дорогам и можно поставить практически в любом месте. Там, где есть источник электроснабжения и связь. Поэтому контейнерные дата-центры считаются хорошей альтернативой традиционным ЦОД.

Контейнерные ЦОДы используются в разных ситуациях. Чаще всего это:

• Удалённые регионы. Внедрение вычислительных мощностей на объектах, где капитальное строительство невозможно или невыгодно.
• Временные проекты. Использование на крупных мероприятиях (выставки, спортивные события).
• Резервные мощности. Обеспечение бесперебойной работы при пиковых нагрузках.
• Экстремальные условия. Поддержка критически важной инфраструктуры в суровых климатических зонах.
• Промышленные предприятия. Развёртывание вычислительных мощностей на удалённых производственных площадках.
• Размещение ИТ-инфраструктуры незначительного масштаба и отсутствие потребностей в дальнейшем росте.
• Оперативная реализация проекта при отсутствии времени на проведение работ по проектированию, согласованию, строительству/реконструкции и вводу в эксплуатацию объекта капитального строительства.

В России контейнерные дата‑центры набирают популярность благодаря своей универсальности и возможности использования в сложных климатических условиях. Например, они активно используются в нефтегазовой отрасли, например, на месторождениях в Сибири и на Крайнем Севере, где традиционные ЦОД построить сложно и дорого. Также такие решения востребованы в телекоммуникационной отрасли, особенно в регионах с низкой плотностью населения, где порой бывает очень нужно быстро развернуть инфраструктуру с хорошей производительностью.

Ставить контейнерные дата-центры можно на любой фундамент – сваи, плита или лента. Если ваш бизнес зависит от IT, но строить огромный ЦОД нет времени или бюджета – контейнерные дата-центры Cloud4Y решат проблему без лишних нервов.

Особенности контейнерных дата-центров Cloud4Y
Когда мы впервые задумались над КЦОД, то сначала посмотрели, что есть на рынке. Оказалось, что поставщиков совсем немного. А компаний, которые готовы серьёзно дорабатывать готовые модели под требования заказчика — и того меньше.

Так возникла новая задача: найти производителя, который обладает необходимым опытом, может изготовить контейнер с учётом наших запросов, а также готов будет вносить изменения в конструкцию в будущем. И это не просто добавление утеплителя, например. А перестройка внутреннего пространства для большей автономности или изменение расположения оборудования в контейнере.

Поиски были долгими, но мы справились. И заказали первые контейнеры для установки на территории наших строящихся дата-центров. Немного — чтобы обкатать их, а потом, если потребуется, доработать. Вот схема такого контейнера.


Решение предусматривает использование закрытых горячих и холодных коридоров. 10 серверных стоек, 12 кВт/стойка, 1 управляющий шкаф, ИБП для серверных стоек и для систем охлаждения, эффективное охлаждение в конфигурации N+1, переход на резервное электроснабжение от ДГУ (дизель‑генераторной установки), системы контроля климатических параметров, безопасности и пожаротушения.

Чему мы уделили особое внимание?

• Эффективное и надёжное охлаждение. Используются установки косвенного фрикулинга с дополнительным фреоновым контуром доохлаждения. 4 системы охлаждения с резервированием N+1 (расположены по торцам контейнера). При умеренной температуре воздух в замкнутом контуре (без забора воздуха с улицы) охлаждается через теплообменник, что существенно экономичнее традиционных методов охлаждения. Внутри контейнера спереди и сзади от стоек организованы горячий и холодный коридоры. Холодный воздух забирается IT‑оборудованием, горячий выводится в систему охлаждения.
• Утепление. Мы спроектировали контейнеры, способные работать при низких температурах нашего региона.
• Удобство, вместительность и энергоэффективность. В контейнере размещены 10 IT‑стоек высотой 47U и 4 служебные (расположены по краям). Заводская установка и подключение зарезервированных модулей распределения питания стоек (PDU). Готовые трассы лотков для укладке кабелей связи. Ко всему оборудованию есть удобный доступ.
• Безопасность. В служебных стойках размещены системы мониторинга (температура, влажность, задымление, доступ). Есть СКУД.

Преимущества контейнерных дата-центров
Как показывает практика, КЦОД популярны по той причине, что они компакты, быстро вводятся в эксплуатацию и могут быть доработаны под нужды компании. Это надёжное практичное решение даже для крупных провайдеров.
Попробуем объяснить, что делает контейнерные дата-центры такими востребованными в России.

• Быстрота внедрения. Полная заводская готовность позволяет быстро запустить систему в эксплуатацию при наличии внешних источников питания и связи.
• Мобильность. Простая транспортировка и установка на объектах без сложных подготовительных работ.
• Экономичность. Снижение затрат за счёт использования стандартных контейнеров — не нужно ничего изобретать и строить с нуля.
• Энергоэффективность. Прецизионные системы охлаждения уменьшают энергопотребление, что снижает эксплуатационные расходы. Косвенный фрикулинг обеспечивает нужный уровень охлаждения при меньших затратах.
• Гибкость применения. Адаптация к экстремальным температурам от –35 °C до +45 °C.
• Автономность. Полное резервирование инженерных систем обеспечивает работу без привязки к внешним источникам.

Характеристики контейнерных ЦОД Cloud4Y

• Соответствие требованиям TIER III.
• Всепогодный утеплённый контейнер, антистатический пол, заземление.
• Резерв электроснабжения от ДГУ.
• Зарезервированные линии связи.
• Круглосуточный доступ. Служба охраны.
• Размещение оборудование в 10 стойках 47U каждая до 12кВт.
• Бесперебойное электроснабжение оборудования в ИТ‑стойках (модульный ИБП в конфигурации N+1).
• Выделенный ИБП для механической нагрузки в конфигурации N+1.
• Герметичные холодный и горячие коридоры.
• Системы контроля и безопасности (СКУД, видеонаблюдение, датчики температуры, влажности, задымления, газового пожаротушения и др.).

Каждая IT‑стойка и кондиционер имеют дублированные линии бесперебойного электроснабжения о ИБП с внешним подключением как от внешней электросети, так и от ДГУ.

Система охлаждения:

• Установлены четыре интегрированных кондиционера свободного охлаждения общей мощностью 200 кВт, оснащённых насосами для хладагента.
• Косвенный фрикулинг.
• Система резервирования: 3+1 (три рабочих и один резервный)

Возможность масштабирования. Масштабируемся в рамках стоек существующего контейнера или путём разнесения ИТ-оборудования по нескольким отдельно стоящим контейнерам, что увеличивает отказоустойчивость работы информационных систем.

Вот ещё немного иллюстраций, как будут выглядеть контейнерные дата-центры Cloud4Y.



Первые контейнеры появятся на нашей площадке в Марфино уже летом 2025. Они будут укомплектованы и готовы к эксплуатации. Таким образом, мы запустим наш собственный дата‑центр ещё до того, как достроим капитальное здание. Предполагаем, что на этой площадке клиентам будет предоставляться инфраструктура в двух вариантах: основном здании или контейнерах. Также можно будет комбинировать эти две возможности.

Сейчас мы работаем сразу в двух направлениях

• Первое — это предоставление в аренду мощностей, размещённых в наших КЦОД. Ну, или аренда контейнеров целиком.
• Второе — поставка подготовленных под заказчика контейнеров.

Мытищи: подготовка к масштабному запуску
На площадке в Мытищах запланировано подключение 40 МВт электроэнергии, и процесс энергоподключения уже запущен. Эксперты провели обследование существующих построек: административное здание находится в хорошем состоянии, а вот сооружение, предназначенное под дата‑центр, требует капитального ремонта. Будем заниматься проектированием и решать, как лучше поступить — снести частично/полностью, или реконструировать.

Параллельно завершены работы по расчистке территории — строительный мусор убран, площадка выровнена. Процесс небыстрый из‑за большой запущенности территории.

Марфино: юридические и технические работы в активной фазе
В Марфино Cloud4Y решает юридические вопросы, связанные с организацией контрольно‑пропускного пункта (КПП). Одновременно с этим:

• Заложен фундамент под контейнерный ЦОД, который ожидается на площадке до конца июня.
• Идёт процесс подключения электроснабжения мощностью 150 кВт.
• Заключён договор на оптоволоконное подключение — готовность ожидается в июле.
• Для обеспечения бесперебойного энергоснабжения установлен временный ангар под газовый генератор, который будет обслуживать первый КЦОД.

Привезли первый контейнерный ЦОД в Марфино
Первый контейнерный дата-центр в Марфино уже доставлен на площадку. Транспортировка была непростой: часть пути контейнер преодолел по воде — сначала его везли морем до Риги, а затем перегрузили на автомобильный транспорт. Подрядчик, имеющий опыт таких перевозок, организовал всю логистику, включая доставку прямо на участок с помощью крана.


Площадка под размещение была подготовлена заранее: залит фундамент, расширена зона для маневров спецтехники. Хотя территория пока не заасфальтирована, тяжёлая техника смогла заехать без проблем.

Ещё мы привезли газопоршневую станцию. Сделали под неё фундамент, установили. Фундамент тут — обязательное требование поставщика. У них есть свои нормы, чтобы контейнер стоял на ровной горизонтальной поверхности, на твёрдом основании. Чтобы под станцией ничего не расплывалось, не уходило в сторону. Например, во время слива конденсата или других стоков, чтобы они, размягчая грунт, не увели нашу станцию в сторону куда-нибудь.

Подключение электричества и инфраструктура
Сейчас ключевая задача — подключение 150 кВт мощности, необходимой для запуска первого контейнерного дата-центра Cloud4Y. Договор с энергетиками уже подписан, идут работы по замене трансформатора и согласованию подвода кабеля. Параллельно решаются вопросы с парковкой для спецтехники и подземными коммуникациями.

Мощность в 150 кВт выбрана не случайно: это оптимальный вариант для текущей конфигурации контейнера с учётом пиковых нагрузок и дополнительного оборудования (охлаждения, сигнализации, освещения). Сейчас всё заводится с расчётом на первый контейнер. В будущем для второго и следующих контейнеров потребуется ещё столько же. Так что согласования по энергоснабжению отнюдь не закончены.

Резервное питание и коммуникации
Чтобы обеспечить бесперебойную работу, предусмотрены резервные источники питания: ИБП (на 10–30 минут автономной работы) и дизельные генераторы, которые включатся в случае длительного отключения электричества.

Также ведётся строительство напорной канализации — из-за протяжённости трассы стоки будут откачиваться насосами. Канализация будет собирать со всех наших, скажем так, ангаров ЦОД, которые будут расположены на территории в Марфино. Параллельно завершается монтаж металлоконструкций навеса над КПП, благоустраивается территория и прорабатывается проект водоснабжения.

Облагораживаем Мытищи
В Мытищах работы пока на стартовой стадии: оформлена аренда земли, проведена экспертиза здания, где разместится ЦОД. Сейчас проектировщики изучают существующие коммуникации и разрабатывают схему въезда на участок.

Главная задача — обеспечить мощное энергоснабжение: ведутся переговоры о подключении 40 МВт и правильной логистике. Это долгий процесс, но подходить к нему нужно комплексно, сразу закладывая инфраструктуру под будущее расширение.

Цель — надёжность и доверие клиентов
Мы стремимся к тому, чтобы клиенты получали стабильный доступ к облачным сервисам без перебоев. Успешный запуск первых собственных дата-центров укрепит наши позиции на рынке, привлечёт новых заказчиков. А мы сможем предлагать больше услуг по более доступным ценам.

Поэтому Cloud4Y расширяет и сетевую инфраструктуру. В условиях дефицита IPv4-адресов мы успешно приобрели новый пул из 4500 IP. Покупка позволяет нам отреагировать на растущие потребности клиентов и увеличить гибкость предоставляемых услуг. Теперь существующие и новые клиенты могут получить выделенные IP-адреса для решения широкого круга задач: от размещения серверов до реализации сложных интеграционных проектов. Новые адреса уже добавлены в сеть провайдера и доступны для заказа.



Марфино: электричество — дело тонкое (и мощное!)
Главное в Марфино за июль — электричество, ведь без него не раскрыть потенциал нашего первого контейнерного ЦОДа. И тут мы здорово продвинулись.

Энергетики взялись за прокладку кабельной линии (КЛ-0,4кВ) от трансформаторной подстанции. Это та самая 150 кВт — оптимальный выбор для запуска первого контейнера. Параллельно занимаемся дополнительными подключениями.

Почему 150 кВт — это правильное решение? Всё просто: мы закладываем мощность с запасом и под высокие нагрузки. Наш контейнерный ЦОД спроектирован так, что одна стойка может «съедать» до 15 кВт. Это в 2-3 раза выше, чем в обычных дата-центрах (где держатся в рамках 5-6 кВт). Зачем? Чтобы вы могли ставить самое мощное «железо» для AI, расчётов или анализа огромных данных — без оглядки на лимиты. Эти честные 150 кВт — не просто цифра, это гарантия, что внутри контейнера будет работать всё: и серверы на полную, и системы охлаждения, и безопасность. И это только на первый контейнер — для следующих будем тянуть ещё.

И другая важная новость: согласовали подключение по оптическому волокну для системы видеонаблюдения территории. Скорость в 1 Гбит/с позволит без задержек получать изображение максимального качества.



КПП: почему он важен
Параллельно с электрикой активно строим контрольно-пропускной пункт (КПП). Это не просто формальность — в мире дата-центров КПП создаёт первый рубеж защиты. Его роль — предотвращать несанкционированное проникновение на территорию и строго соблюдать регламент доступа (проверка пропусков, досмотр). КПП будет оснащён навесом — для защиты персонала и критически важного оборудования поста (камеры, системы контроля и т. д.) от непогоды.

Что сделано: на площадку привезли и разгрузили изготовленные металлоконструкции (мы за всем процессом следили). Нашли надёжного подрядчика, оформили договор. Установили 4 мощные колонны-опоры. На них будем монтировать конструкции навеса, которые уже начали собирать.



Мытищи: готовим платформу для гиганта
В Мытищах пока тише, но не менее важно. Продолжаем кропотливую подготовку. Активно прорабатываем вопрос удобного съезда на наш земельный участок.

В энергетике тоже есть прогресс: занимаемся расключением вводного щита 0,4 кВ (15 кВт) — скоро подача тестового напряжения. Это важный шаг к большим мощностям для нашего контейнерного дата-центра.

И, конечно, не забываем про инфраструктуру: собрали пакет документов и запросили технические условия на всё необходимое — пожарное водоснабжение, холодное и горячее водоснабжение, канализация и теплоснабжение. Без этого — никуда.

В фокусе — ваше спокойствие
Каждый элемент и каждое действие на стройплощадке — это шаг к нашей главной цели: дать вам максимально надёжный и безопасный доступ к облачным сервисам. Собственные дата-центры — это фундамент для стабильности, роста и новых возможностей по отличным ценам.

www.cloud4y.ru/cloud-hosting/container-data-center-rental/

На торжественной церемонии вручения Национальной премии “ЦОДы.рф” 20 апреля 2023 года дата-центр Миран-2 победил в номинации “ЦОД года” в которой боролись именитые коммерческие дата-центры России.

Премия присуждается коммерческому дата-центру не только за надежность и качество предоставляемых услуг, но и команде профессионалов обеспечивающих бесперебойную работу инженерного оборудования, клиентскому сервису за четкость и быстроту решений, а также руководству двигающему ЦОД в правильно векторе развития.



Качество, надежность и клиентоориентированность дата-центров МИРАН подтверждается отзывами не только клиентов, но и профессионалами Российского рынка ЦОД, которые в в ходе голосования среди всех номинантов выбрали именно дата-центр Миран-2.

Дата-центр Миран-2, представляет из себя современную площадку на 400 серверных шкафов, построенную по всем правилам стандартов Tier III. ЦОД обладает современной инженерной инфраструктурой обеспечивающую бесперебойную работу серверного и телекоммуникационного оборудования, стыками с 50+ операторами связи, круглосуточной технической поддержкой и широким спектром ИТ-услуг.

Думаю, что моё повествование будет интересным и полезным тем, кто хочет заняться хостингом. Или тем, кто сомневается, стоит ли начинать своё дело, не имея большого стартового капитала. Раскрыть и показать проблемы, с которыми можно столкнуться и которым изначально не придаёшь значения, вследствие того, что не сталкивался с тем или иным.

История достаточно длинная. Хочу делиться ею поэтапно, начиная с предыстории, заканчивая тем, что мы имеем на сегодняшний день. Будем очень рады открытому общению, вы можете задавать любые вопросы и ни один из них не останется без внимания. Планируется еженедельная публикация, по одной главе, а между публикациями я буду отвечать на ваши вопросы. Возможно будут какие-либо предложения, пожелания, их мы будем обязательно учитывать и дополнительно подробнее раскрывать вне графика интересующие вас темы. По поводу того, как планирует публиковаться материал мы разобрались, теперь перейдём к хостингу.

Итак, что же такое хостинг в двух словах? Хостинг-это услуга по предоставлению ресурсов для размещения информации на сервере, постоянно находящемся в сети. Информация может быть разная, это и сайты, и почта, и базы данных, какие-то индивидуальные проекты. Для их корректной работы их размещают на своих серверах, либо обращаются к услугам хостинг-провайдеров, где за работоспособностью оборудования, в нашем случае круглосуточно, следят специалисты. Теперь перейдём непосредственно к истории.

Наш хостинг-провайдер существует с 2011 года по сей день и продолжает развиваться. Начинал я абсолютно один, но потом по мере развития одному становилось всё сложнее и сложнее — я понимал, что не смогу больше справляться и организовал службу круглосуточной технической поддержки.

Немного предыстории: Началось всё ещё давно, в начале 90-х, когда у меня, ученика 6-го класса, появился первый компьютер, благодаря моим родителям. Я очень долго мечтал о нём, и тут моя мечта сбылась. Для того времени это была невиданная роскошь. Как сейчас помню, что он стоил 1000 долларов и был на базе intel 486. Тогда я понял, что моя жизнь будет несомненно связана с компьютерами и интернет технологиями. Я очень увлечённо начал учиться создавать различные простенькие программки, потом посложнее. Пользовался различной литературой. В общем, был самоучкой. Ближе к 10 классу я решил создать свою локальную сеть, мою идею поддержали ребята из соседних домов, мы по крышам проводили кабель, один конец привязывался к палке, и палка перекидывалась на соседнюю крышу и так далее. Таким образом мы объединили несколько компьютеров, что позволило нам обмениваться файлами, общаться в своём чате и многое другое. Это сейчас никого не удивишь локальной сетью, а тогда, в середине девяностых это было ноу хау. В нашем достаточно большом городе в то время таких сетей было раз-два и обчёлся. Мою идею стали поддерживать многие и присоединялись к нам. Но рано или поздно всё заканчивается. Появились другие заботы, учёба в университете. За время учёбы мною было создано несколько проектов, но подробно на них останавливаться не будем.

Идея создания собственного дата-центра пришла ко мне еще задолго до того, как я начал делать первые шаги к его созданию. Я прекрасно понимал, что это очень затратное дело. Тогда в 2006 году рынок ещё не был перенасыщен подобными проектами. Мы сами пользовались услугами хостинга, так как развивали один IT-проект, услуги которого были доступны каждому и стоили недорого. И конечно же сталкивались с различного рода проблемами. Не хочу никого обидеть, но хотелось большего от технической поддержки. Никто особо не вникал в твои проблемы, а мы очень хотели, чтобы нам могли оперативно и качественно помочь. Сотрудничали с разными провайдерами. Но то что я хотел бы видеть, не встретил к сожалению. Вот и появилась мысль создать собственный хостинг и сделать одним из приоритетов качественную, оперативную, круглосуточную техподдержку, которая бы тщательно вникала в проблемы обратившихся и также тщательно и быстро помогала разрешить сложившиеся ситуации. Но это было только пока в мыслях. Прекрасно понимая, что, имея те ресурсы, которыми я обладал, я не смогу сразу предоставить качественные услуги, но это не повод отступать. Как и в любом деле всё проявится в процессе работы.

От нашего проекта, который мы продали, осталось около 20 серверов на базе INTEL, с совершенно разными возможностями и источник бесперебойного питания. Вот с них я и решил начать. Чтобы минимизировать затраты, я попросил своего знакомого, у которого было свободное место в офисе, разместиться на время у него. Всё моё оборудование занимало всего один квадратный метр. Я приступил к созданию простенького сайта, делал всё самостоятельно. Около двух недель я работал над сайтом, конечно же за это время я сделал лишь всё необходимое для того чтобы начать. Впоследствии сайт дорабатывался и добавлялся дополнительный функционал. Тогда собственного дата центра у меня не было, и я мог оперировать только двумя услугами. Разместил информацию на нескольких площадках, первые клиенты не заставили себя долго ждать. Кстати, многие из них и по сей день работают с нами, что не может не радовать. Мы им очень благодарны за это. Уже на второй месяц работы я стал окупать свои ежемесячные затраты. Нужно было двигаться дальше, ведь ничто не стоит на месте. Появилась возможность заказывать по 3-4 сервера ежемесячно. Но появились и первые проблемы. Так как кол-во серверов увеличивалось, температура повышалась и уровень шума тоже, всё это доставляло определённые неудобства моему приятелю и его сотрудникам. Я принял решение подобрать отдельное помещение и переехать. В этом же здании бизнес-центра мне предложили помещение площадью 8 кв. метров, и я согласился. Провёл туда электричество толстым кабелем. И нужно было постепенно заниматься повышением надёжности.

Изначально у меня стояла одна стойка и бытового кондиционера мощностью 2,5 кВт было достаточно. Но как я уже писал количество серверов увеличивалось и появилась необходимость приобрести специализированный промышленный кондиционер. При выборе руководствовался ценой, так как больших оборотных средств у меня не было. Остановился я на агрегате мощностью 14 кВт. Реально конечно он столько не вытягивал, но со своими обязанностями справлялся неплохо. На некоторое время о проблемах с перегревом можно было забыть. Потратил на охлаждение на этом этапе 80000 тыс. руб. сам кондиционер, 24000-установка и 3600-спецтехника. Теперь мне нужно было выбрать генератор, потому что бывают сбои с подачей электроэнергии, либо в самом бизнес центре происходят аварийные отключения и необходимо было место под его размещение. С местом мы определились быстро. В подвале бизнес-центра было множество различных помещений, они предложили мне поменять им общую дверь в подвал, а за это предоставят мне отдельное помещение под генератор. А вот с выбором генератора пришлось посложнее. Опять же выбирал основываясь на стоимость и мною не было учтено множества разных вещей, которые по моему представлению должны быть по умолчанию. Я коснусь этой темы подробнее, может кому пригодится. Лучше конечно пользоваться услугами хорошей проверенной компании, как сейчас мы и делаем, но тогда я не придал этому большого значения, а зря. Всё равно пришлось тратить немало дополнительных средств и времени.

Выбор свой я остановил на китайском генераторе за 180000 рублей мощностью до 20 кВт. Вернее, сам двигатель был немецкий, а навесное китайское. Это конечно что-то с чем-то. Организация, которая продавала, никакого сервиса по установке не предлагала. Как потом выяснилось инструкции по установке не было, не на русском, не на каких-либо других языках, масла нет, антифриза нет и так далее. Приходилось разбираться со всем самостоятельно и дорабатывать. Даже дорабатывались и исправлялись детали, которые входили в комплект. Плюс к тому, менеджер сказал, что вес его 250 кг, поэтому я пригласил 6 человек для разгрузки и транспортировки его в подвальное помещение. На самом деле оказалось, что вес его 750 кг. А грузчики берут только до 650. В общем транспортировка в подвальное помещение доставила уйму хлопот и причиной тому была простая неподготовленность к процессу. Опять же и отсутствие опыта данного рода мероприятий. Ещё плюс узкий длинный проход и несколько так называемых карманов на пути добавили сложности. В общем это я к тому, что обращайте внимание на любые мелочи при покупке оборудования. Через 4 часа генератор был на своём месте.
Это тот самый первый генератор.


А в целях противопожарной безопасности к нему прилагался модуль порошкового пожаротушения отечественного производства. Такие модули широко используются во многих сферах деятельности, благодаря удобному расположению, так как он монтируется на потолок, эстетичному внешнему виду, а также возможностью запуска как принудительного, так и самостоятельного в режиме срабатывания во время пожара. Нам к великому счастью применить его не удалось. Опять же никаких инструкций не прилагалось, разбирались сами, но там достаточно всё просто. Монтируется по типу люстры, срабатывает от повышения температуры. Ну а для принудительного приведение в действие от него идут контакты, на которые необходимо подать напряжение в 12 В. Вот его фото.



Для введения в работу генератора был необходим Автоматический Ввод Резерва, в дальнейшем АВР, который был приобретён. Итак, что же такое АВР? Автоматический Ввод Резерва-это способ обеспечения резервным электроснабжением нагрузок, подключённых к системе электроснабжения, имеющей не менее двух питающих вводов и направленный на повышение надёжности системы электроснабжения. Заключается в автоматическом подключении к нагрузкам резервных источников питания в случае потери основного. Как всегда, руководствовались ценой.

В поисковике нашли организацию, это не составило большого труда, выбрали первую попавшуюся, сейчас объясню почему. Написал я нескольким сразу, но мне очень нравится и для меня важно, когда быстро отвечают и называют цену. Поэтому тот, кто первый ответил и разложил всё по полочкам, с тем мы и начали работать. АВР мы выбрали трёхфазный, по 100 Ампер на каждую фазу, сразу с запасом на будущее, так как цена его была приемлема -17000 рублей плюс доставка в наш город, около 1000 рублей. Если покупать с меньшими характеристиками, то по деньгам выходит почти тоже самое. Размер шкафа тот же, доставка такая же. Можно было установить его самим, но решили прибегнуть к помощи знакомого электрика и установить его.

Заплатили за монтаж мы очень недорого, я не помню сколько, но символически. Эксплуатируется он и по сей день. Минус в том, что организации, занимающиеся реализацией подобного оборудования, не были обременены инструкциями по эксплуатации и это конечно принесло определённые проблемы, но мы учились на своих ошибках и самостоятельно изучали все возникающие вопросы.

АВР анализирует несколько параметров электроснабжения. Так, например, при возникающих перепадах напряжения выше или ниже минимума АВР отключал электричество, а особенность мониторинга у ДГУ это не учитывало, так мониторинг был подключен до АВР. Также был случай, когда изменилось чередование фаз.

Для исключения подобных неудобств, был установлен мониторинг напряжения, мониторинг состоянии ИБП, что позволяло при нестандартных проблемах отреагировать вручную.

Потом я раскрою подробности в изменении схемы подключения, когда дойдёт очередь. И ещё немного о недостатках. У данного АВР есть неудобство для нас, мы его не учли. На фото видно, что нет защитных колодок на клеммах, а так как дата центр постоянно видоизменяется, увеличивается количество стоек, хотелось бы подключать новые стойки не отключая электричество. Это потом было исправлено и об этом в дальнейших публикациях, когда дойдём хронологически до покупки ещё одного АВР.


Теперь об подробнее об Источнике Бесперебойного Питания, в дальнейшем ИБП, англоязычная форма UPS (Uninterruptible Power Supply) — источник электропитания, который необходим при кратковременном отключении основного электропитания и защиты от перепадов напряжения. Его задача в непрерывности подачи электричества. Он включается при аварийных отключениях электроэнергии до введения в работу запасного источника питания, в нашем случае ДГУ, либо устранения недостатков аварийного отключения основного источника. Выбранный нами иностранного производства, бывший в употреблении у одного из отечественных дата центров и у них же приобретённый, мощностью 18 кВт. Входное напряжение 380 В, искажения входного тока примерно 5%, частота входного напряжения 45-65 Гц. Выходное напряжение- 380 В, КПД- 92 %, рабочая температура 0 — 45°С. Стоимость его была 120000 рублей плюс доставка до нашего города 5000 и 5000 от транспортной компании по городу. Вес его около 400 кг с батареями. Установка и настройка была также самостоятельно произведена, так как наш электрик сказал, что не сталкивался с таким оборудованием.

На тот момент наш маленький ЦОД размещался в бизнес-центре на площади 8 кв. м. и располагались в нём четыре стойки и порядка сорока серверов. Теперь коснёмся заданного мне вопроса по форме собственности. Это было Общество с ограниченной ответственностью, помещение в аренде, стоимость аренды 5000 руб., оплата электроэнергии по счётчику, примерно 15000-20000 рублей ежемесячно. Учёт услуг был рукописным и основывался на собственное мнение и дорабатывался в процессе развития. Что касается бухгалтерии не знаю, что можно написать, бухгалтерия само собой была. Была получена лицензия на телематические услуги. Эта очень простая в получении лицензия, доступная любому желающему. Здесь нет никаких подводных камней.

Мы переехали в помещение площадью 8 кв.м.

Уже ощущался некий рост, увеличивалось кол-во клиентов. Причём для этого мы как-то по началу ничего и не делали. Разместились на одном из специализированных сайтов и поучаствовали в обсуждении на каком-то форуме. Вот и всё. Информация расходилась за счёт сарафанного радио. Наши клиенты делились со своими друзьями и партнёрами. Сыграло большую роль, как мне кажется, внимательное и отзывчивое отношение и быстрая реакция на входящие обращения любого характера.

С момента запуска проекта до переезда в помещение 8 кв.м. прошло два месяца. В этом помещении мы проработали ровно год. Закупалось серверное оборудование, за этот год финансовый оборот вырос в четыре раза. Напомню, что уже в первый месяц доходы начали преобладать над расходами. За этот год никаких существенных перебоев в работе не было, разве что с кондиционером. Была утечка фреона, забегая вперёд, скажу, что устранить её так и не удалось. Очень дорогостоящая процедура монтажа-демонтажа и доставки до сервисного центра. Это ложилось на наши плечи и в услуги по гарантии не входило. Необходимо было привлечение спецтехники. Всё же неоднократно мы возили его в организацию, которая нам его продала, на ремонт, к сожалению, безуспешно. А новые размещать было негде, так как эти 8 квадратов и так были напичканы оборудованием. Так и жили, периодически (примерно раз в месяц) заправляя фреон.

По-хорошему конечно всё делается совсем по-другому, но для этого нужен огромный бюджет. А я таковым не располагал. Поэтому всё делалось по ходу. В связи с увеличением объёмов продаж наших услуг нам были необходимы дополнительные мощности. Места уже практически не было, все стойки были переполнены, охлаждать становилось всё сложнее.

И электроснабжение здания оставляло желать лучшего, частые отключения, трансформаторные подстанции были очень старые. Я начал задумываться о подборе отдельного здания для ЦОД большей площади. Вообще по нашему опыту за весь период работы, больше всего проблем и отключений было связано с энергоснабжением. В дальнейшем мы не экономили уже в этом направлении. Нужно было помещение с большей мощностью по электроэнергии, большей площадью и достаточно удалённое от жилых и офисных помещений, дабы никому не мешать когда заводится генератор. Обзванивали объявления по сдаче в аренду подходящих помещений. Больше всего интересовали площади с мощностями на заводах. Где-то две недели я потратил на подбор места для нашего уже более крупного ЦОДа. Нашёл помещение 70 кв.м. на территории одного из бывших заводов-гигантов советской эпохи и мощностью 100 кВт. Самое интересное, что цена аренды была всего 6000 рублей за всю площадь. Для сравнения напоминаю, что за 8 кв.м. я платил 5000 рублей. Помещение, конечно, требовало конкретного ремонта. Оно располагалось так, что, что вход был с территории завода, нужно было проходить и проезжать через проходную, а часть здания с окнами выходила за территорию. Когда мы завозили стройматериалы и прочее имущество, необходимо было подать заявку на ввоз- вывоз, что очень затрудняло и занимало время. Заявку эту нужно было подавать заранее, чтобы обязательно стояла подпись начальника охраны, которого очень трудно было застать на рабочем месте. Когда делаешь ремонт и мотаешься туда-сюда, то одно привезёшь, то другое, то вывезти мусор нужно, на всё это составлялись заявки. Промучавшись так некоторое время, я предложил арендодателю вариант из окна, которое выходит за пределы завода, сделать дверь и тогда уже не нужно было никаких заявок. Окно это выходило на закрытую парковку машин эдак на 50-60. Очень удобный подъезд, можно и материал подвозить и оборудование. Вполне комфортно мог подъехать длинномер. Само здание было буквой Г, с третьей стороны примыкал высокий забор вплотную и через проезд четвёртой гранью было ещё одно сооружение. Получился такой надёжный, закрытый со всех сторон подъезд и плюс удобная парковка. У нас, да наверное как и везде сейчас, проблема с парковками. Но у нас эта проблема особенно остро стоит, так как город очень большой. Предстояло распланировать помещение и сделать ремонт, почти капитальный.



На эту площадку покупалось уже всё новое. ИБП (источник бесперебойного питания) держал теперь не 20 минут, как предыдущий, а полтора часа, обошёлся он нам в 550000 рублей вместе с установкой. Кондиционер, о котором я писал выше, починили временно, его хватило на год работы всего. В итоге купили у одного из самых известных банков два б/у кондиционера. Такие новые стоили по 500000 каждый, а нам они достались за 120000 рублей два, плюс 100000 потратили на новые внутренние блоки, которых не хватало и 150000 установка. Энергопотребление по 15 кВт. Максимальная мощность каждого 36 кВт. Было приобретено ещё шесть стоек, в каждой из которых размещалось примерно 30 машин. Всего уже было 10 стоек, в четырёх из них 120 машин. Ещё были сделаны четыре стеллажа, на каждом из которых располагались по 20 десктопных серверов. Теперь нужно было приобрести второй генератор. В нашем, одном из крупнейших городов России, существовала и существует по сей день организация, занимающаяся сборкой ДГУ ( дизель генераторная установка) Туда обращаться мы не стали, так как воспользовавшись поисковиком, нашли вдвое дешевле, правда в 2000 км от нас, это ещё с доставкой.

Точно не помню, по-моему обошлось всё это дело нам в 840000 рублей. Кстати, сразу уточнил, есть ли инструкция на русском языке, так как мы уже сталкивались с подобной проблемой. Сам дизель был отечественный.


А генератор и контроллер французского производства.

В комплект ещё входил контейнер, типа «север» утеплённый.


Доставка была до места, что не могло не радовать, а монтаж мы производили самостоятельно. Тосол и масло было в комплекте. Особенно запомнилось, как я возил 20 л канистрой дизельное топливо, чтобы наполнить бак в 400 л.

Коснёмся планировки нового ЦОД, настройки сети и серверов, каналов связи и их организации на территории завода, а также изменения, которые мы внесли в конструкцию ДГУ.


На наведение порядка, вывоз мусора, ремонт своими силами, ушло где-то три месяца. Вначале я делал один из серверных залов, чтобы перенести часть оборудования туда и так как имел ограниченный бюджет, делал всё сам, одновременно работая с клиентами. Всё это конечно наложило определённый след на сроки переезда. Уже после, сделав один из залов, я перевёз туда оборудование, настроил его и приступал постепенно к дальнейшему ремонту. Вот так, в течении трёх месяцев, я привёл всё в порядок.
Итак, из каких помещений состоял наш новый ЦОД? Распланировать наше помещение мы решили следующим образом: на 70 кв. м. располагались два серверных зала 20 и 25 кв. м. В одном из залов находились стойки с оборудованием, в другом размещалась техподдержка. Также отвели помещение для одного из наших генераторов, менее мощного. Кондиционеры и второй генератор находились за пределами ЦОД, но на нашей территории. Вот в принципе и всё, что мы могли себе позволить разместить на 70 кв. м. В последствии, благодаря договорённостям мы добавили ещё 15 кв. м., освободили вторую серверную и техподдержка переехала именно в эту комнату 15 кв. м., освободив место для расширения. Так через некоторое время второй зал был занят оборудованием. Мы не всё фотографировали, потому что в тот момент ещё не было мыслей что-то рассказывать о нас, даже не представлял, что это можно вот так сделать. Но вот выложу что есть, чтобы примерно имелось представление как было до и становилось после.




Как я уже писал, на новую площадку закупали всё новое. Со средствами пожаротушения мудрить ничего не стали, решили пока остановиться на противопожарных модулях, о которых было написано в прошлых публикациях. Это потом, впоследствии, мы уже стали использовать другую противопожарную систему, об этом позже и вы поймёте почему очень скоро. Про ИБП, ДГУ и кондиционеры я писал тоже в прошлой публикации, а вот про АВР ни слова. Учитывая ошибки прошлых лет, к этому вопросу мы подошли более серьёзно. На этот раз воспользовались услугами компании из нашего города и нам собрали АВР по нашему проекту. Потрачено было около 40000 рублей. Вот его фото.


Также мы добавили аварийное освещение. Не смотря на гарантированное энергоснабжение, мы решили приобрести светильники аварийного освещения. Мало ли что… Такой светильник является автономным, в случае прекращения подачи электроэнергии светильник переходит на работу от встроенного аккумулятора. Так не разу не пришлось воспользоваться ни аварийным освещением, ни противопожарной системой.
Для переезда на новую площадку нам было необходимо приобрести другой маршрутизатор, достаточно профессиональный. Опять же в целях экономии купили бывший в употреблении, потратив около 100000 рублей. Новый такой стоил порядка 1000000 рублей. Чувствуется разница, правда?

Нужно было его настроить, с этим пришлось повозиться. Необходимо было сбросить старый пароль. Двое специалистов пытались это сделать, но ничего не вышло. Я так и не понял почему, видимо не работали с подобным железом. Пришлось разбираться самому. Оказалось, ничего сложного, поработал с поисковиком, нашёл решение и сбросил пароль. А вот для дальнейшей настройки пришлось пригласить посвященного человека, так как я объективно смотрел на вещи и не надеялся на свои возможности в данном случае. Он-то всё и сделал. Для того чтобы начать перенос виртуальных серверов мы между площадками проложили волокно, точнее взяли в аренду на время. Нужно было чтобы они взаимодействовали. Я такое не разу не делал, забегая вперед скажу, что с какими-либо трудностями столкнуться не пришлось. Работали два маршрутизатора, виртуальные сервера мы перенесли по сети, и клиенты даже не заметили этого. А физические приходилось отключать и перевозить. С каждым клиентом индивидуально договаривались, учитывая, когда ему будет удобно отключиться. Иногда получалось объединять в один временной промежуток по 10 серверов. Перевозил на своём легковом автомобиле. В среднем время отключения на каждого клиента занимало около двух часов, благо площадки, в рамках нашего города, находились недалеко друг от друга, на расстоянии 5 км. Переезжали где-то около месяца, так как повторюсь, учитывали время и возможности клиентов. В основном всё это происходило ночью. По настройке серверов сказать особо нечего. Так как оборудование б/у, если чего не знали, смотрели в интернете рекомендации и делали самостоятельно. Теперь что касаемо интернета… По интернет- провайдерам, завод предлагал своих операторов по совсем уж заоблачным ценам. Мы обращались к конкурсному управляющему, который отвечал за эти вопросы. Аудиенцию у него очень было сложно получить, в итоге мы с ним так и не встретились. IT-отдел отказывался, чтобы мы подключали своего оператора. В конце концов наше упорство было поощрено, и мы воспользовались услугами оператора с предыдущей серверной и завод взял лишь деньги за крепление кабеля к объектам.
Теперь по генератору. В ДГУ нам пришлось внести незначительные изменения в конструкции, для удобства обслуживания и работы, сейчас расскажу почему и что было сделано. При включении аварийного энергоснабжения и запуске ДГУ двигатель не заводился самостоятельно. По всей вероятности, причиной этого было попадание воздуха в систему. Приходилось вручную подкачивать топливо, а помпа ручной подкачки находилась в очень неудобном месте, плюс шаг был ну очень маленьким, всего 1 см. Не понятно, почему так неудобно было всё сделано. Это нас не устраивало, да и ненадёжно как-то. Пообщались с людьми, который сталкиваются по роду своей работы с дизелями и пришли к выводу, что нужно поменять помпу ручной подкачки, а также перенести её в другое, более удобное место.На фото как раз видно где располагается старая, фабричная помпа

Мы решили не экономить и приобрели помпу иностранного производства, а также заменили топливные шланги на прозрачные, чтобы можно было наблюдать наличие топлива. На фото как раз видно новую помпу и общий вид, где располагалась старая и где теперь новая.

Стрелочками как раз указано-вверху расположение фабричной помпы, внизу новая.

Ну и конечно решили увеличить время запуска зажигания до 15 секунд. Это оказалось очень удобным решением. С проблемой мы справились, ДГУ заводится с пол оборота и по сей день, при необходимости. Но эта необходимость возникает крайне-крайне редко.

Новая услуга дата-центра FREEhost.UA – «Покупка сервера с конфигурацией под заказ»

Мы начали предоставлять услугу «Продажи серверов с конфигурацией под заказ» для размещения в нашем дата-центре. Услуга будет полезна для тех кто хочет разместить сервер в нашем дата-центре, но физически не находится в Киеве и тех кто не хочет «заморчаиваться» с железом, и при этом не может размещать информацию на ВПС или арендуемых серверах.

Преимущества работы с дата-центром FREEhost.UA:

• гарантия на оборудование до 36 месяцев. Ремонт и замена вышедшего из строя оборудования будет осуществляться специалистами нашей компании;
• у нас большой склад собственного оборудования. Поэтому у нас всегда найдется подмена на период ремонта;
• вам не придется ждать несколько дней для решения проблемы;
• у нас большой опыт работы с серверным оборудованием разных производителей, поэтому мы сможем подобрать наиболее выгодное решение именно для Вашей задачи.

Подробней с услугой можно ознакомиться на нашем сайте freehost.com.ua/servers/buyserver/

Бонус. Первичная установка ОС Linux на сервере выполняется бесплатно.

Дата-центр FREEhost.UA соответствует стандарту Tier 3, все узлы дата-центра зарезервированы по схеме N+1. К дата-центру подведены 3 оптических линии, 2 дизель-генератора, ширина каналов 100 Гбит, газовое пожаротушение. На данный момент в нашем дата-центре размещено около 1000 единиц серверного оборудования.

Новая функция WEB-почты — общая записная книга домена.

Часто сотрудникам одной компании нужно делиться контактами с коллегами. Новая функция нашего почтового веб-интерфейса упрощает эту задачу. Шарить контакты можно в режиме чтения и в режиме редактирования. В первом случае получатели контакта могут только просматривать его, а во втором и редактировать его.

Электронная почта предоставляется во всех тарифных планах виртуального хостинга FREEhost.UA, а так же при регистрации доменного имени. Сервис почты включает в себя:

• неограниченное количество почтовых ящиков;
• поддержку pop/imap/smtp;
• спам-фильтр и антивирус с поддержкой папки СПАМ;
• веб-почта с инструментами совместной работы.

Больше информации про услугу виртуального хостинга читайте на нашем сайте freehost.com.ua/unix/

Свежие статьи в блоге

Как оптимизировать верстку сайта для использование с мобильных устройств

freehost.com.ua/faq/articles/kak-optimizirovat-verstku-sajta-dlja-ispolzovanie-s-mobilnih-ustrojstv/

Обслуживание сервера: услуга, которая решает множество проблем

freehost.com.ua/faq/articles/obsluzhivanie-servera-usluga-kotoraja-reshaet-mnozhestvo-problem/

Если настала вторая половина осени, значит пора готовиться к зиме :) В октябре мы обслужили наши ДГУ, проверили работу системы обогрева, протестировали нашу зимнюю систему фрикуллинга и теперь ждем морозов :)

Виртуальный хостинг

После месяца внутреннего тестирования мы начали боевые испытания WAF файрвола. Пока он защищает только один сервер виртуального хостинга. Если система будет функционировать стабильно на протяжении 2-х месяцев и хорошо себя зарекомендует, мы планируем внедрить ее на всех серверах шаред хостинга. Наш WAF файрвол использует политики OWASP. В в дальнейшем мы планируем интегрировать возможность управления файрволом в панель управления хостингом, чтоб пользователи могли самостоятельно включать и выключать его, а так же управлять уровнями фильтрации трафика.

Другие новости

В рамках нашей программы по обновлению и стандартизации мы выполняем миграцию старых VPS, использующих Jail конейнеризацию на облачную инфраструктуру. Мы планируем завершить процесс перехода до конца 2020 года.

Мы приняли решение постепенно вывести из эксплуатации все старые коммутаторы. Это позволит нам оставить внутри дата-центра только один сетевой бренд — Juniper. Такое решение однозначно упростит и ускорит автоматизацию процессов.

Свежие статьи в блоге

Создание веб-контроллеров

https://freehost.com.ua/faq/articles/sozdanie-web-kontrollerov/

Использование SSHFS для монтирования удаленной файловой системы

https://freehost.com.ua/faq/articles/ispolzovanie-sshfs-dlja-montirovanija-udalennoj-fajlovoj-sistemi/

Как настроить удаленный рабочий стол RDP и VNC

https://freehost.com.ua/faq/articles/kak-nastroit-udalennij-rabochij-stol-rdp-i-vnc/

Как выработать Link Building стратегию? Шаблон автоматической таблицы

https://freehost.com.ua/faq/articles/kak-virabotat-link-building-strategiju-shablon-avtomaticheskoj-tablitsi/

Свежее видео на нашем канале Youtube

Настройка LAMP на Debian 10

https://youtu.be/hp4HYgplZvE

Чтоб быть в курсе наших акций, новостей и получать только самую полезную информацию в области администрирования Linux серверов, PHP программирования и веб-маркетинга подписывайтесь на наш Телеграмм канал https://t.me/freehostua

Всем привет! Меня зовут Егор, и я системный инженер дата-центра компании Selectel. Сегодня я расскажу немного о себе и о том, как проходит мой день.

С IT-сферой я познакомился достаточно давно, еще до обучения в университете. Большую роль для меня сыграло прохождение курсов в академии Cisco, а также активное участие в мероприятиях Cisco Connect в качестве помощника организатора. Тогда мы отвечали за установку, настройку и подключение инфраструктуры стендов и проведение лабораторных работ для гостей. Там я и познакомился с Кириллом Малевановым, техническим директором Selectel и настоящим профессионалом в своей области.

В процессе общения я узнал об открытой вакансии стажера в московском дата-центре компании Selectel. Еще с детских лет мне была интересна профессия инженера, а интернет казался невероятной «магией». Желание узнать, как именно устроены сети, стало ключевым в выборе будущей профессии. Так что попробовать себя в роли стажера показалось мне хорошим способом набраться опыта и получить необходимые знания.



Процесс обучения нельзя было назвать простым. Приходилось в очень сжатые сроки впитывать большое количество информации, стараясь не мешать дежурным инженерам выполнять свои обязанности. Первое время было сложно общаться с клиентами как вживую, так и в тикетах, поскольку нельзя было допустить ни единой ошибки или неточности.



Спустя 3.5 месяца интенсивного обучения и прохождения экзамена я получил Job Offer на позицию системного инженера. С этого и начался новый интересный этап в моей жизни.

Пробуждение
Утро начинается не с кофе. Оно начинается в 5:40 со звука первого из десятка будильников, установленных в телефоне с 5-ти минутным интервалом. Увы, проснуться с первого сигнала для меня практически нереально. Ближе к 6 утра удается встать, быстро собраться и отправиться на работу.


Сборы на работу
Взять с собой сэндвичи на завтрак, ноутбук и зарядку для мобильного — вот, практически, и все сборы. Все остальное уже есть на работе.


Поездка до дата-центра
Начало рабочего дня только в 8 утра, однако медлить не стоит — московские пробки начинают собираться уже с 7 часов. К тому же, приехав на работу на час раньше, можно спокойно принять душ и позавтракать. Опаздывать у нас не принято — этим не только портишь свои показатели, но и «подставляешь» коллегу, который всю ночь дежурил. Именно последний факт является наиболее мотивирующим, поскольку в команде все давно уже сдружились.


Прием смены
В сменах работает четыре инженера, тем самым, у нас есть чередующиеся дневные и ночные смены. В процессе работы каждое действие фиксируется в системе учета, однако самые важные события за смену передаются сменщику лично. Разумеется, хочется услышать с утра, что никаких проблем за прошедшую смену не возникло.


Обработка обращений


Главным способом общения с заказчиками у нас является тикет-система. Через нее все обращения принимаются в работу. Как и во многих других компаниях, у нас реализована многоступенчатая система поддержки. На общие вопросы отвечают сотрудники «первой линии», но если потребовались какие-либо реальные действия на оборудовании, заявки попадают к нам, в инженерно-технический отдел.


Наиболее частыми запросами являются просьбы о перезагрузке зависшего оборудования и временного подключения IP-KVM. При поступлении такой заявки мы определяем нужный сервер по уникальному идентификатору, находим его «координаты» и выполняем требуемые действия в серверном помещении.


Помимо этого мы занимаемся установкой операционных систем на заказанные клиентами серверы, а также их базовой настройкой. Отдельно можно отметить запросы на замену вышедших из строя компонентов, например, дисковых накопителей. Наша задача в этом случае максимально оперативно идентифицировать и заменить компонент, минимизируя возможный простой сервера.

Обходы


Бесперебойную работу дата-центра обеспечивает множество инженерных систем, в частности, холодильные установки, системы бесперебойного электропитания и установки пожаротушения. Если интересны подробности, рекомендую прочитать статью в нашем блоге. Несмотря на то, что вся информация с них постоянно поступает в помещение, где сидят инженеры, непосредственные обходы помещений очень важны.


Каждые 4 часа системный инженер обязан обойти все помещения и заполнить соответствующий отчет. Постоянно находиться в инженерном помещении нет необходимости, поскольку все сообщения мониторинга приходят на дежурный смартфон, что дает возможность оперативно на них реагировать.


Обед
Как любил говорить Пончик, из старого советского мультфильма «Незнайка на Луне», — «Режим питания нарушать нельзя». Отправляюсь на бесплатный обед к нам в столовую, пока коллеги продолжают трудиться.


Задание на смену
Помимо непосредственного приема обращений, в мои обязанности входит еще очень большое количество различных операций. Компания постоянно вводит новые серверные мощности в эксплуатацию, но перед тем как заказчики смогут заказать выделенные серверы, оборудование необходимо полностью подготовить к работе.

Новые серверы маркируются, монтируются в стойки, настраиваются и заносятся в систему автоматического управления. К ним сразу подключаются все необходимые кабели: питание, интернет, локальная сеть. Именно этим я сейчас и займусь. Днем присутствует несколько инженеров, поэтому задача обработки обращений пока что передается в их руки.


Кроме того, в Москве уже входит в привычку видеть рядом практикантов или стажеров нашего отдела. Кто, если не мы, будет им помогать развиваться и раскрывать свой потенциал?

Прием сервера
Ближе к окончанию рабочего дня поступила заявка от нового клиента на размещение оборудования. Через тикет-систему я прислал ему схему проезда, выписал пропуск и через некоторое время встречаю его на проходной. Пока клиент пьет кофе:

• Осматриваю сервер, убеждаюсь в том, что заявленная конфигурация соответствует реальной
• Сверяю серийные номера
• Делаю замер энергопотребления
• Маркирую уникальным идентификатором с двух сторон
• Готовлю акты приема оборудования

Теперь клиент может спокойно ехать по своим делам, а сервер в течение пары часов будет установлен в стойку и станет доступен удаленно.


Часто возникает ситуация, когда заказчик находится в другом городе или даже в другой стране. Привезти оборудование на размещение лично не представляется возможным. В этом случае его можно доставить курьерскими службами при условии предварительной договоренности через тикет-систему.

Монтаж
Непосредственно перед выполнением монтажа определяю стойку, куда нужно установить оборудование. Здесь играет большую роль количество блоков питания и наличие свободных портов в коммутаторе доступа. Через скрипт запрашиваю эти данные, проверяю наличие свободных портов и убеждаюсь в наличии свободных розеток.


Также смотрю показания стоечного мультиметра или АВР (автомат ввода резерва), чтобы фактическая потребляемая мощность стойки не вышла за максимально возможный предел с учетом нового оборудования.


После того как все это проверено, можно смело идти и монтировать. Поскольку мы принимаем на размещение только оборудование форм-фактора Rackmount для установки в стойку 19” — чаще всего с размещением нет никаких проблем.


Сдача смены
Рабочий день подошел к концу. Рассказываю сменщику обо всех событиях, произошедших за последние 12 часов. Торжественно передаю ему «символы власти» — ключи от помещений и дежурный мобильный телефон.


Время прогулки
Перед тем, как ехать домой, у меня есть время полюбоваться видами вечерней Москвы.


Отход ко сну
Машина припаркована, ужин съеден, пора и ложиться спать. Завтра будет новый отличный день.

Дата-центр для майнинга в Москве.
AntMiner S9 14 TH/s 9550
AntMiner L3+ 504 MH/s 5450
Ebit E10 10950
GPU-ферма 1 кВт 6850
iBeLink DM22G 5450
Bitfury B8 43950
Скидки от объёма до 20%.

Размещение GPU ферм и ASIC’ов в холодном дата-центре по адресу улица Свободы, д. 35. itsoft.ru/data-center/mining/