На Объекте применили комплекс мер, предназначенных для организации инженерных систем ЦОДа, чтобы разместить серверное и телекоммуникационное оборудование.
Проектом охвачены следующие системы инфраструктуры ЦОДа:
- система организации оборудования;
- структурированная кабельная система;
- система электропитания и освещения;
- система кондиционирования и вентиляции;
- автоматическая система газового пожаротушения;
- система диспетчеризации и мониторинга.
Основными целями создания ЦОД являются:
- обеспечение надежной и эффективной работы основных и вспомогательных подразделений за счет интегрирования их в единую информационную систему предприятия;
- консолидация вычислительных ресурсов предприятия для обеспечения высокого уровня отказоустойчивости и надёжности хранения данных;
- снижение затрат на сопровождение инфраструктуры вычислительного центра организации;
- уменьшение совокупной стоимости владения;
- разработка технических решений создания ЦОД, обеспечивающих поэтапное наращивание функциональности и вычислительной мощности.
Размещение оборудования
Заказчиком было принято решение разместить в ЦОД только вычислительные мощности, так как система коммутации осталась в прежней серверной комнате, что позволило не нарушать построенную ранее структурированную кабельную систему. Сервера ЦОДа с коммуникационным центром связаны высококачественным оптическим каналом с 200% запасом по кабелю (и одномодовому и моногомодовому), что является достаточным при динамике роста траффика и мощностей коммуникационного оборудования при росте нагрузки 10Gb на физическую линию до рабочего места.
Внутри ЦОД для сервисных служб проложен медный кабель UTP level 5e для передачи данных о работе ИБП, PDU и кондиционера по протоколу SMNP.
Помещение ЦОДа оборудовано фальшполом. Это необходимо для обеспечения подпольной системы кондиционирования при использовании прецизионных систем, а также, чтобы скрыть инженерно-технические коммуникации. Для фальшпола был выбран наиболее распространенный, экономически выгодный вариант панелей фирмы Linder из ДСП повышенной плотности Ligna. Нижняя сторона панелей покрыта тонколистовым алюминием или листовой сталью толщиной 0,05 мм. Для обеспечения подачи холодного потока воздуха от системы кондиционирования в зоне лицевой стороны шкафов были установлены перфорированные плиты фальшпола - Ventec того же производителя, которые представляют собой сварной стальной гальванизированный каркас, покрытый стальным листом.
Монтаж структурированной кабельной системы
Для размещения серверного и телекоммуникационного оборудования установили монтажные шкафы 19-дюймового формата высотой 42U производства HP. Построена магистральная кабельная система для соединения точки консолидации в серверной, которая расположена на втором этаже здания с ЦОДом. В процессе проектирования учитывалось, что СКС должна быть сертифицирована на категорию 6А и обеспечивать скорость передачи 40 Gбит/с.
Горизонтальная кабельная система предназначена для подключения электрических (информационных) сигналов от телекоммуникационных розеток в зоне ИБП и кондиционера. Для горизонтальной подсистемы СКС выбран 4-х парный одножильный неэкранированный кабель фирмы Siemon категории 5е.
Монтаж системы электропитания и освещения
Система электропитания и освещения выполнена по стандартам ЦОДа. Подвод кабеля произведен с двух разных подстанций. Шкаф электропитания полностью собран из комплектующих Schneider Electric. Спроектированная система по надёжности электроснабжения относится к особой группе I-й категории, а остальные электроприемники – к I-й категории.
Для распределения электроэнергии, а также защиты сетей от коротких замыканий, перегрузок и токов утечки, установлен щиток ЩРЦ со степенью защиты IP31 с автоматическими выключателями фирмы Schneider Electric и устройствами защитного отключения.
Для питания потребителей предусматривается два кабельных ввода от АВР, которые секционируются ручным способом. На вводе данным проектом предусмотрено два трехфазных выключателя нагрузки «NSX 160» фирмы Schneider Electric на 160А и блокировка этих выключателей механическим способом, что предотвращает одновременное включение обоих выключателей. Кабели электрической сети выбраны по допустимым токовым нагрузкам, проверены на соответствие токам защитных аппаратов и допустимую потерю напряжения.
В качестве основной защитной меры от поражения электрическим током при повреждении изоляции предусмотрено зануление корпусов электрооборудования. Все соединения выполнены пайкой, опрессовкой или с помощью кабельных наконечников.
Монтаж источника бесперебойного питания
Для системы бесперебойного питания был применен ИБП американского производителя Tripp Lite. Модель SU40KX (40 кВА) компании Tripp Lite является 3-фазной интеллектуальной онлайн системой ИБП линейки SmartOnline с модульной конструкцией. Она обеспечивает 100% доступность системы за счет использования модульной архитектуры N+1 и возможности параллельного включения по схеме 1+1. В конфигурации N+1 ИБП SU40KX обеспечивает два полнокомплектных надежных силовых модуля мощностью 20 кВА, которые можно заменять без выключения ИБП (сохраняется питание нагрузки) при необходимости проведения обслуживания.
В шкафах используются блоки распределения питания, однофазные коммутируемые блоки PDU, номинальный ток 32 А, напряжение 230 В. Данный управляемый БРП обеспечивает разнообразные функции расширенного контроля и управления по сети, позволяющие включать, выключать, восстанавливать или блокировать питание каждой отдельной розетки, контролировать параметры электропитания на объекте и дистанционно контролировать потребляемую мощность.
Интерфейс ПО PowerAlert поддерживает дистанционное управление, а также отправку по электронной почте через защищенный веб-интерфейс, протокол SNMP или Telnet, или через интерфейс SSH индивидуально настраиваемых уведомлений о задаваемых пользователем событиях. Индивидуальное управление розетками в режиме реального времени позволяет выполнять дистанционную перезагрузку сетевого оборудования, которое перестало отвечать, или специально запрограммировать определяемые пользователем последовательности включения и выключения для обеспечения нормальной работы взаимозависимых ИТ-систем и предотвращения перегрузок из-за больших пусковых токов при включении сетевого оборудования. Неиспользуемые розетки БРП могут быть заблокированы электронными средствами во избежание подключения несанкционированного оборудования. Во избежание перегрузки критически важных сетей и срабатывания автоматических выключателей значения, потребляемого через БРП тока, отображаются локально на индикаторе измерительного устройства или дистанционно через веб- или сетевой интерфейс.
Монтаж системы кондиционирования и вентиляции
Ассимиляция теплоизбытков, а также поддержание температурно-влажностного режима внутреннего воздуха производится установками прецизионных кондиционеров французской компании Uniflair TDAR0611A с подачей холодного воздуха вниз, забор сверху; Фреон R410A; 400V/3+N/50Hz, работающих на полной рециркуляции внутреннего воздуха. Управление работой кондиционеров предусматривается в автоматическом режиме. Так как система кондиционирования предназначена для круглосуточной и круглогодичной работы с обеспечением требуемых параметров внутреннего воздуха, проектом предусматривается установка двух кондиционеров (рабочий/резервный) по 100% холодопроизводительности в помещении серверной.
Монтаж системы автоматического газового пожаротушения
В помещении ЦОД установлена автоматическая система газового пожаротушения АГПТ, предназначенная для обнаружения очага возгорания, подачи газового огнетушащего вещества в очаг возгорания и его ликвидации. Горючим материалом в помещении являются электронное оборудование и кабельная продукция.
Настоящим проектом предусмотрена упрощенная система мониторинга ЦОДа. Это связано с тем, что в поставленный ИБП встроена система Power Alert, которая позволяет пользователю задавать собственные параметры для оповещения о целом ряде различных событий (ко всем PDU и ИБП подключены датчики контроля окружающей среды ENVIROSENSE (при использовании с картами SNMP/веб или микропроцессорными PDU) и обеспечивающая дистанционный контроль температуры и влажности, а также интерфейс с сухими контактами для управления и контроля устройств аварийной сигнализации, систем безопасности.
Мониторинг системы электропитания, системы кондиционирования, АГПТ завели на GSM-тревожное оповещение ССU825, выполненного да din-рейку. Система оповещает по gsm-каналу о состоянии окружающей среды и состоянии устройств ЦОДа.
