NVIDIA Rubin: 100% жидкостное охлаждение экономит 4 млн долларов в год
Традиционные системы воздушного охлаждения поглощают до 40% электроэнергии дата-центров, превращаясь в скрытую статью расходов. Платформа Rubin от NVIDIA исключает вентиляторы и чиллеры, снижая затраты на охлаждение и воду до нуля при сохранении полной производительности чипов.
Компания NVIDIA представила платформу Rubin, которая впервые в индустрии реализует 100% жидкостное охлаждение для всех компонентов сервера, включая чипы и сетевое оборудование. Ключевое нововведение — работа системы с температурой охлаждающей жидкости до 45°C, что выше температуры в горячей ванне, но позволяет исключить использование вентиляторов и традиционных чиллеров. Переход на такую архитектуру в дата-центрах мощностью 50 МВт способен сократить расходы на охлаждение и воду более чем на 4 млн долларов в год, одновременно снижая потребление воды практически до нуля.
Технологический сдвиг: от воздуха к жидкости
Традиционные дата-центры десятилетиями работали по принципу «холодильника», где воздух охлаждался до низких температур, а шум вентиляторов достигал 85 децибел. Новая архитектура Rubin меняет парадигму: тепло отводится напрямую от процессора жидкостью, которая циркулирует в замкнутом контуре. Охлаждающая смесь состоит из 75% воды и 25% пропиленгликоля. Жидкость входит в чип при 45°C и выходит при 55°C, при этом производительность процессоров не падает, так как холодные пластины удерживают температуру кремния в допустимых пределах.
Отказ от воздушного охлаждения устраняет необходимость в организации «горячих» и «холодных» коридоров внутри серверной. Это позволяет разместить в два раза больше вычислительной мощности на одной стойке: система, занимавшая ранее 6 юнитов (стандартных модулей стойки), теперь укладывается в 2 юнита. Серверы получают герметичные передние панели вместо перфорированных решеток, что исключает попадание пыли и снижает шум до минимума.
Важный нюанс: Высокая температура жидкости не означает перегрев чипов. Жидкость эффективно отводит тепло непосредственно от источника, позволяя чипам работать на полной мощности даже при входе теплоносителя в 45°C.
Экономика и экология: вода и электричество
Основная выгода новой системы заключается в радикальном снижении энергопотребления и водопотребления. В классических ЦОД охлаждение съедает до 40% всей электроэнергии. Повышение температуры работы чиллеров всего на 1°C снижает затраты на охлаждение на 4%. Архитектура NVIDIA DSX для «фабрик ИИ» использует сухие охладители (dry coolers), которые отдают тепло наружному воздуху без испарения воды.
В благоприятном климате это позволяет полностью отказаться от механических чиллеров, включая их лишь на 1% времени в году, когда температура воздуха за пределами здания критически высока. Потребление воды падает с 2,6 млн галлонов на мегаватт в год (для систем с градирнями) до практически 0%. Для крупного объекта в 50 МВт экономия на воде и электричестве достигает 4 млн долларов ежегодно.
Стоит учесть: Эффективность системы напрямую зависит от географии. В регионах с прохладным климатом (например, Шотландия) можно полностью отказаться от холодильного оборудования, используя лишь радиаторы на улице, тогда как в жарких зонах (например, Феникс) чиллеры потребуются в пиковые периоды, но их работа будет минимальной.
Инфраструктурные изменения и тепло
Переход на 100% жидкостное охлаждение требует перепроектирования всей инфраструктуры. Ранее жидкостное охлаждение применялось гибридно: только для GPU и CPU, тогда как остальные компоненты охлаждались воздухом. В поколении Rubin инженеры переработали схемы отвода тепла для всех элементов платы, используя единый вход и выход для жидкости. Это упрощает разводку труб и делает архитектуру стойки чище.
Дополнительным преимуществом становится возможность утилизации тепла. Тепло, выделяемое серверами, можно отводить в близлежащие коммерческие или жилые здания для отопления. Партнеры NVIDIA, такие как Schneider Electric (подразделение Motivair), подтверждают, что при достижении определенной плотности мощности на чип жидкостное охлаждение становится не опцией, а обязательным условием работы.
На фоне этого: Рынок переходит от модели «чем холоднее, тем лучше» к модели «чем эффективнее отвод тепла, тем лучше». Это меняет требования к строительству дата-центров, делая акцент на замкнутых контурах и интеграции с городской теплосетью.
Операционные последствия и скрытые риски
На основе фактов из источника можно выделить следующие практические аспекты для внедрения:
- Географическая привязка: Полное исключение чиллеров возможно только в регионах с прохладным климатом. В жарких зонах потребуется резервное оборудование, что может нивелировать часть экономии на капитальных затратах.
- Плотность размещения: Увеличение плотности вычислений в 3 раза (с 6 до 2 юнитов) требует пересмотра несущей способности полов и логистики обслуживания в существующих дата-центрах.
- Зависимость от состава жидкости: Использование смеси воды и пропиленгликоля требует контроля качества теплоносителя и регулярного обслуживания замкнутого контура, чтобы избежать засоров или коррозии.
- Тепловая инерция: Система с большой массой жидкости может медленнее реагировать на резкие скачки нагрузки по сравнению с воздушным охлаждением, что требует точной настройки алгоритмов управления потоком.
- Стоимость перехода: Переход на новую архитектуру потребует полной замены инфраструктуры охлаждения, что является значительным капитальным вложением, окупаемым за счет снижения операционных расходов (OPEX) в долгосрочной перспективе.
Источник: blogs.nvidia.com
