Жидкостное охлаждение серверов становится ключевой технологией для дата-центров, в которых растёт мощность процессоров, ускорителей и вычислительных стоек. Традиционная воздушная система ограничена количеством тепла, которое можно безопасно отвести через серверный зал и теплообменники кондиционеров. При нагрузках, характерных для AI, машинного обучения и высокопроизводительных вычислений, температура и расход воздуха быстро достигают практического предела.
Жидкость эффективнее переносит тепло и позволяет отводить его непосредственно от процессоров, ускорителей и других нагруженных компонентов. Это уменьшает воздушные потоки и локальные перегревы, но требует инженерного проекта, контроля теплоносителя и защиты от протечек.
Почему воздушного охлаждения становится недостаточно
Обычный сервер забирает холодный воздух спереди и выбрасывает нагретый поток назад. При росте мощности стойки необходимо увеличивать расход воздуха, размеры вентиляторов и производительность кондиционеров. Возникают высокие скорости, шум, повышенное энергопотребление и сложность равномерной подачи холода ко всем серверам.
Для низкой и средней плотности холодные и горячие коридоры остаются эффективными. Но охлаждение высокоплотных стоек усложняется, когда GPU-серверы создают десятки киловатт тепла в небольшом объёме. Отдельные компоненты могут перегреваться даже при достаточной общей мощности системы.
Что такое жидкостное охлаждение ЦОД
Жидкостное охлаждение ЦОД передаёт тепло от ИТ-оборудования жидкому теплоносителю, который циркулирует между серверными теплообменниками, распределительными устройствами и внешним контуром. Система может снимать основную нагрузку или дополнять воздушное охлаждение: процессоры и ускорители подключаются к жидкости, а блоки питания и накопители продолжают охлаждаться воздухом.
Direct Liquid Cooling
Direct liquid cooling, или прямое жидкостное охлаждение, подводит теплоноситель к холодным пластинам, установленным на процессорах и ускорителях. Тепло проходит через металлическую пластину в жидкость, после чего переносится к CDU и далее во внешний водяной контур.
Преимущество технологии заключается в прямом контакте теплообменника с основным источником тепла. Система отводит большую долю тепловой мощности без прохождения через воздух серверного зала. Серверы сохраняют стандартную конструкцию стоек, но требуют заводских или сертифицированных комплектов трубок, соединений и холодных пластин.
Что такое CDU для дата-центра
CDU для дата-центра — это блок распределения и управления охлаждающей жидкостью. Он разделяет контур здания и технологический контур серверов, поддерживает требуемые температуру, давление и расход, а также защищает ИТ-оборудование от загрязнений и нестабильных параметров внешней сети.
В состав CDU обычно входят теплообменник, насосы, фильтры, расширительный объём, датчики и контроллер. Устройство контролирует температуру подачи и возврата, давление, расход и наличие утечек. Для критичных систем применяются резервные насосы, два ввода питания и подключение к диспетчеризации.
Как устроена система
- внешний контур от чиллера, сухого охладителя или градирни подводит холод к CDU;
- теплообменник CDU отделяет воду здания от серверного теплоносителя;
- насосы подают жидкость через распределительный коллектор к стойкам;
- внутристоечные трубопроводы соединяют серверы с холодными пластинами;
- нагретая жидкость возвращается в CDU и передаёт тепло внешнему контуру;
- автоматика контролирует расход, температуру, давление и аварийные сигналы.
Один CDU может обслуживать несколько стоек либо отдельный ряд. Архитектуру выбирают по мощности, расстояниям, резервированию и допустимому объёму теплоносителя в машинном зале.
Охлаждение AI-серверов
Охлаждение AI серверов требует особого внимания из-за высокой мощности GPU и плотного размещения вычислительных модулей. Нагрузка одной стойки может существенно превышать возможности стандартной воздушной схемы. Производители всё чаще предусматривают серверы с заводским подключением к прямому жидкостному контуру.
При подборе учитывают не только номинальную мощность стойки, но и долю тепла, передаваемую жидкости. Например, холодные пластины могут снимать основную нагрузку с процессоров и ускорителей, а оставшаяся часть продолжает поступать в воздух. Следовательно, прецизионные кондиционеры или внутристоечные теплообменники всё равно должны покрывать остаточное тепловыделение.
Надёжность и защита от протечек
Используются герметичные быстросъёмные соединения, вторичный контур, датчики протечки, поддоны и автоматическое отключение повреждённой ветви. Соединения оставляют доступными для осмотра. Одновременно контролируют химический состав теплоносителя, коррозию, загрязнение и совместимость металлов, поскольку неподготовленная вода способна повредить холодные пластины, фильтры и насосы.
Когда жидкостное охлаждение оправдано
- мощность стоек превышает возможности существующей воздушной системы;
- в ЦОД устанавливаются GPU-серверы, AI-кластеры или HPC-оборудование;
- необходимо увеличить вычислительную плотность без расширения площади;
- важно снизить расход воздуха и энергопотребление вентиляторов;
- доступен внешний контур, способный принять тепло при требуемой температуре;
- эксплуатационная команда готова обслуживать жидкостную инфраструктуру.
Что проверить перед внедрением
Проект начинается с теплового баланса по каждой стойке: определяют долю жидкостного и воздушного охлаждения, температуры подачи и возврата и перспективу роста. Затем рассчитывают расход, гидравлическое сопротивление, насосы, теплообменники, трубопроводы и резервирование. Также проверяют пол, место CDU, маршруты труб, электропитание, дренаж, BMS и возможность поэтапного монтажа без остановки серверов.
Итог
Жидкостное охлаждение серверов позволяет эффективно отводить тепло от высокоплотных стоек, AI-серверов и HPC-систем, когда возможности воздуха становятся ограниченными. Direct liquid cooling сохраняет привычный формат стоек, а CDU обеспечивает разделение и управление контурами. Успешное внедрение требует точного расчёта, контроля теплоносителя, защиты от протечек и резервирования. Инженеры NIKLAND проектируют жидкостное и гибридное охлаждение ЦОД с учётом мощности оборудования, существующей инфраструктуры и требований к доступности.
