Серверная комната: как спланировать охлаждение, питание, мониторинг и доступ

Работа серверной зависит от трёх факторов: температуры, питания и доступа. Как спланировать прецизионное охлаждение, онлайн-ИБП, мониторинг среды и контроль доступа.
Серверная комната: как спланировать охлаждение, питание, мониторинг и доступ

Почему серверная — это единая система

Серверная — место, где сосредоточены критически важные системы организации: серверы, сетевое оборудование, системы хранения данных, видеорегистраторы. Будет ли она работать без сбоев, зависит в основном от трёх факторов: температуры, электропитания и доступа. Поэтому все три направления разумно проектировать как единую систему, а не как отдельные поставки, никак не согласованные между собой.

Практика показывает, что самая частая причина аварии — не отказ сервера, а перегрев после остановки кондиционера, например в пятницу вечером, когда в здании до понедельника никого нет. Именно поэтому мониторинг среды с автоматическими уведомлениями нужно считать обязательной частью проекта, а не опцией, которую можно добавить когда-нибудь потом.

Помещение и воздушный поток

Проектирование начинается с оценки помещения. Подходит комната, которую можно утеплить и загерметизировать, без больших остеклённых поверхностей, нагреваемых солнцем, и по возможности вдали от водопроводных и канализационных труб. Пыль и неконтролируемый наружный воздух вредят оборудованию, поэтому дверь и кабельные проходы уплотняются. В зависимости от масштаба кабели прокладываются под фальшполом или по кабельным лоткам над шкафами.

Шкафы расставляются по принципу «холодного и горячего коридора». Серверы и активное сетевое оборудование забирают воздух спереди и выбрасывают нагретый воздух сзади. Когда лицевые стороны соседних рядов обращены друг к другу, между ними образуется холодный коридор, а задние стороны формируют горячий коридор, откуда кондиционер забирает воздух. Холодный и горячий потоки не смешиваются, и охлаждение работает заметно эффективнее.

Что должна уметь система

  • Планировка помещения и воздушного потока — чёткая схема расстановки шкафов, холодные и горячие зоны, без застойных участков.
  • Запираемые 19-дюймовые шкафы — достаточной глубины, с перфорированными дверями и организацией кабелей, чтобы воздух свободно проходил спереди назад.
  • Прецизионное охлаждение с запасом на рост — мощность рассчитывается по фактическому тепловыделению оборудования, а не приблизительно по площади.
  • Онлайн-ИБП и отдельная линия питания — защита от помех, перенапряжений и кратковременных пропаданий напряжения.
  • Мониторинг температуры, влажности и протечек — с уведомлениями по e-mail и SMS при выходе за пределы нормы.
  • Датчик открытия двери — каждое открытие фиксируется, в том числе в нерабочее время.
  • Контроль доступа в помещение с журналом — всегда известно, кто и когда входил.
  • Отдельный контур заземления и выравнивание потенциалов.
  • Маркировка и документирование каждой трассы — основа для быстрого обслуживания и порядка при проверке по информационной безопасности.

Охлаждение: прецизионный кондиционер вместо бытового

Бытовые кондиционеры рассчитаны на комфорт людей и периодическую работу. В серверной нужна непрерывная работа 24/7 и поддержание заданных температуры и влажности. Прецизионные кондиционеры работают в постоянном режиме и контролируют оба параметра: слишком сухой воздух повышает риск статического электричества, слишком влажный — риск образования конденсата.

Мощность охлаждения рассчитывается по фактическому тепловыделению. Практически вся электрическая мощность, потребляемая оборудованием, превращается в тепло, поэтому потребление шкафов — хорошая отправная точка. К ней добавляется запас на рост: редкая серверная через несколько лет остаётся с тем же оборудованием. Там, где простой недопустим, охлаждение резервируется — два агрегата работают поочерёдно или один берёт на себя нагрузку при отказе другого.

Электропитание и ИБП

Серверная должна получать питание по отдельной линии от главного распределительного щита, чтобы не делить цепь с освещением, кухонной техникой или другими мощными потребителями. В шкафах устанавливаются блоки распределения питания, от которых запитывается каждое устройство.

Рекомендуемый тип ИБП — онлайн (с двойным преобразованием): нагрузка постоянно питается через инвертор, поэтому помехи, колебания и кратковременные пропадания сетевого напряжения до оборудования не доходят. Время автономной работы рассчитывается исходя из задачи — либо на корректное выключение серверов, либо на работу до запуска генератора. При наличии генератора можно предусмотреть его автоматический запуск при пропадании сети.

Часто недооценённый элемент — заземление. Отдельный контур заземления и выравнивание потенциалов между шкафами, кабельными лотками и оборудованием снижают риск повреждений и помех в линиях передачи данных.

Мониторинг среды и уведомления

IP-система мониторинга собирает данные с датчиков температуры, влажности, протечки и открытия двери. Доступ к ней осуществляется через браузер, а при выходе значения за заданный порог отправляется уведомление по e-mail и SMS. Датчики протечки размещаются на полу под кондиционером и рядом с трубами, датчики температуры — с лицевой стороны шкафов, где измеряется воздух, который оборудование действительно забирает.

Смысл в том, чтобы уведомление пришло до аварии, а не после неё: растущая температура оставляет время на реакцию, пока серверы ещё работают.

Контроль доступа

Серверная — самое чувствительное помещение в организации, и доступ в неё должен быть ограниченным и отслеживаемым. Считыватель на двери с индивидуальными картами или кодами ведёт журнал: кто и когда входил. Дополнительно в помещении может устанавливаться камера, записи которой дополняют журнал. Сами шкафы тоже запираются — это второй уровень защиты, особенно когда в серверную заходят сторонние специалисты.

Из чего состоит

  • Серверные шкафы 19 дюймов с органайзерами для кабелей
  • Прецизионное кондиционирование, при необходимости с резервированием
  • ИБП и блоки распределения питания в шкафах
  • Система мониторинга среды с датчиками
  • Контроль доступа в помещение
  • Кабель-менеджмент и заземление
  • Монтаж, настройка и документация: схема электропитания, план шкафов, кабельный журнал

Типичные ошибки при проектировании

  • Один бытовой кондиционер без резерва — агрегат, не рассчитанный на непрерывную работу, становится единой точкой отказа.
  • Мониторинг без уведомлений — датчик, данные которого никто не смотрит, ничего не предотвращает. Уведомления нужно проверять, и они должны доходить до человека, который может отреагировать.
  • ИБП, который ни разу не проверяли — аккумуляторы стареют, и реальное время автономной работы нужно периодически контролировать.
  • Расчёт без запаса — охлаждение и питание рассчитываются на текущее оборудование плюс ожидаемый рост.
  • Общая линия питания — срабатывание автомата из-за другого потребителя может остановить всю инфраструктуру.
  • Отсутствие документации — немаркированные кабели превращают каждое последующее вмешательство в расследование.

Что это даёт

Грамотно спроектированная серверная обеспечивает стабильную рабочую температуру, а значит — более долгий срок службы оборудования и меньше отказов. Уведомления приходят вовремя, оборудование защищено от скачков напряжения и кратковременных отключений, а доступ в помещение прозрачен и отслеживаем. Упорядоченная инфраструктура ускоряет любое последующее обслуживание и соответствует ожиданиям клиентов, партнёров и аудиторов при проверке информационной безопасности.