A распределительный холодораспределительный агрегат (CDU) — это часть оборудования, которая отделяет водяной контур объекта центра обработки данных от контура технологического охлаждения, который напрямую касается серверов, и является единственным компонентом, наиболее ответственным за надежность работы системы жидкостного охлаждения при плотности стоек выше 40 кВт. Короткий ответ для тех, кто оценивает его: CDU регулирует поток, давление, температуру и фильтрацию между двумя независимыми жидкостными контурами с помощью теплообменника, насосов, клапанов и датчиков, а размер выбранного вами устройства должен соответствовать тепловой нагрузке вашей стойки, температуре воды на вашем объекте и вашим требованиям к резервированию, а не согласно общей спецификации каталога.
В этой статье рассказывается, как работает распределитель холода, как он взаимодействует с Гидравлический силовой агрегат постоянного тока в стойках с жидкостным охлаждением, в которых используются однофазные или двухфазные холодные пластины с накачкой, как выбирается и обслуживается жидкость вторичного контура, как на практике принимаются решения по размерам и резервированию, какие команды по установке и вводу в эксплуатацию чаще всего ошибаются и что чаще всего спрашивают покупатели при сравнении поставщиков для развертываний 2025 и 2026 годов. Учитывая, сколько инфраструктуры жидкостного охлаждения устанавливается прямо сейчас для поддержки стоек ускорителей высокой плотности, цель здесь — дать полную рабочую ссылку, а не поверхностный обзор.
Что на самом деле делает блок распределения охлаждения
В каждой серверной стойке с жидкостным охлаждением необходимы два водяных контура, которые никогда не смешиваются. По контуру объекта вода или водно-гликолевая смесь поступает из холодильной установки, сухого охладителя или градирни в ряд стоек. Технологический контур, иногда называемый вторичным контуром, обеспечивает циркуляцию гораздо более чистой и тщательно контролируемой жидкости непосредственно через охлаждающие пластины, установленные на процессорах, графических процессорах и памяти. распределительный блок охлаждения находится между этими двумя контурами и выполняет четыре работы одновременно.
Во-первых, он передает тепло из вторичного контура в контур установки через пластинчатый теплообменник, даже не допуская физического соприкосновения двух жидкостей. Во-вторых, он прокачивает вторичную жидкость через коллекторы сервера с контролируемой скоростью потока, обычно измеряемой в литрах в минуту на стойку. В-третьих, он отфильтровывает частицы из вторичного контура, защищая узкие каналы внутри охлаждающих пластин, размер которых может достигать 0,3 миллиметра. В-четвертых, он контролирует и сообщает о температуре, давлении, расходе и состоянии утечек в систему управления зданием центра обработки данных.
Поскольку вторичный контур герметичен и имеет небольшой объем по сравнению с контуром объекта, он может работать при более жесткой и более предсказуемой температуре, чем неочищенная вода в здании, поэтому охлаждение холодной пластиной может поддерживать расчетные тепловые показатели чипа, которых не может достичь воздушное охлаждение. Стойку, которой потребуется поток воздуха в несколько тысяч кубических футов в минуту, чтобы поддерживать безопасную рабочую температуру, вместо этого можно охлаждать с помощью нескольких десятков литров циркулирующей жидкости в минуту, что во многом объясняет, почему жидкостное охлаждение сейчас считается практическим пределом плотности ускорителя.
Стоит уточнить, чем не является ХДС. Это не чиллер, он не генерирует холодную температуру из ничего и не заменяет механическую установку. Это устройство передачи и управления, расположенное между установкой и стойкой, и его задача — следить за тем, чтобы жидкость, касающаяся стружки, оставалась в узком, стабильном диапазоне независимо от того, что делает контур объекта на другой стороне теплообменника.
Краткая история того, как ХДС попали в зал данных
В коммерческих дата-центрах не запустились распределительные устройства охлаждения. Основная конструкция, герметичный вторичный контур, изолированный от системы водоснабжения объекта через пластинчатый теплообменник, возникла в высокопроизводительных вычислительных лабораториях и системах охлаждения промышленных процессов несколько десятилетий назад, где чувствительному оборудованию требовалась чистая, химически контролируемая вода, а не то, что вытекало из стояка охлажденной воды здания. Суперкомпьютерные центры рано начали применять этот подход, потому что их процессоры работают сильнее и плотнее, чем что-либо в типичной серверной комнате предприятия.
По мере того как вычисления на базе графических процессоров перешли из исследовательской ниши в массовую облачную и корпоративную инфраструктуру, тот же принцип изоляции был переупакован в категорию продуктов, предназначенную для операторов центров обработки данных, которые никогда ранее не касались жидкостного цикла. То, что раньше было специально спроектированным блоком, предназначенным для установки одного суперкомпьютера, превратилось в стандартизированный, монтируемый в стойку или напольный продукт с определенными уровнями мощности, готовыми к использованию коллекторами и встроенными на заводе средствами удаленного мониторинга. Эта стандартизация является основной причиной того, что жидкостное охлаждение стало жизнеспособным в коммерческих масштабах, а не осталось специальным инструментом для национальных лабораторий.
Сравнение типов CDU In-Row, In-Rack и Sidecar
Распределительные устройства охлаждения обычно продаются в трех физических форматах, и выбор влияет на все: от площади помещения до прокладки кабелей и планирования резервирования.
Общее сравнение емкости и занимаемой площади для распространенных форматов CDU, используемых в залах обработки данных с жидкостным охлаждением. | Формат CDU | Типичная холодопроизводительность | Стойки обслуживаются | Обычное размещение |
| Встраиваемый в стойку CDU | от 20 до 80 кВт | 1 | Низ или верх одного шкафа |
| Внутрирядный CDU | от 100 до 400 кВт | от 4 до 10 | Выделенный слот внутри ряда |
| Коляска или CDU на уровне комнаты | от 500 кВт до 2 МВт плюс | Одна полная капсула или зал | Соседнее механическое помещение или конец ряда |
Встраиваемые в стойку блоки привлекательны для модернизации, поскольку они требуют минимальной площади вторичного контура и могут быть добавлены в один шкаф, не затрагивая остальную часть ряда, но они увеличивают количество насосов, фильтров и теплообменников, которые нуждаются в периодическом обслуживании по всему залу. Рядные блоки занимают золотую середину, которую предпочитают многие провайдеры колокейшн, поскольку сбой одного блока затрагивает только несколько шкафов, а не весь блок, и блок обычно можно вытащить и обслуживать спереди, не нарушая соседние стойки.
Агрегаты с коляской и на уровне помещения становятся все более распространенным выбором для новых обучающих кластеров искусственного интеллекта, поскольку централизация перекачки и теплообмена уменьшает количество движущихся частей на стойке и упрощает зоны обнаружения утечек, хотя для этого требуется более крупный участок вторичного контура трубопроводов и более тщательная балансировка давления в более длинной распределительной сети. Операторы, переходящие на учебные модули с очень высокой плотностью размещения, часто в диапазоне 100 кВт и выше на стойку, склонны тяготеть к этому формату, поскольку он позволяет группе разработчиков механических систем концентрировать доступ к техническому обслуживанию, запасным частям и мониторингу в одном месте, а не распределять их по десяткам блоков на уровне шкафа.
Архитектуры CDU «жидкость-жидкость» и «жидкость-воздух»
Помимо физического формата, CDU также различаются по способу отвода тепла. CDU жидкость-жидкость, которая является более распространенной конфигурацией в новых зданиях, обменивается теплом напрямую с охлажденной водой объекта или водяным контуром конденсатора через пластинчатый теплообменник. Вместо этого CDU жидкость-воздух отводит тепло в воздух помещения через радиатор и узел вентилятора, что означает, что он вообще не требует подключения к водопроводу.
Преимущества жидкостного обмена
Эта архитектура масштабируется до гораздо более высоких плотностей, поскольку вода переносит гораздо больше тепла на единицу потока, чем воздух, и она полностью отделяет вторичный контур от условий воздуха в помещении, что делает производительность гораздо более предсказуемой. Это стандартный выбор для любого предприятия, на котором уже имеется установка охлажденной воды или контур сухого охладителя, доступный в ряду стоек.
Преимущества жидкостно-воздушной смеси
Эта архитектура полезна в ситуациях модернизации, когда прокладка новых трубопроводов охлажденной воды к ряду нецелесообразна, или на небольших периферийных объектах, где вообще нет водяного контура объекта. Компромисс заключается в том, что блоки жидкость-воздух по-прежнему зависят от температуры воздуха в помещении для окончательного отвода тепла, поэтому их мощность и эффективность несколько снижаются в жарких помещениях, и они вносят дополнительное тепло обратно в помещение, которое затем должна удалить система кондиционирования помещения.
Где в контур вписывается гидравлический силовой агрегат постоянного тока
Некоторая путаница, с которой сталкиваются покупатели, возникает из-за путаницы гидравлических силовых агрегатов, предназначенных для промышленного оборудования, с насосными агрегатами внутри блока распределения охлаждения. А Гидравлический силовой агрегат постоянного тока В контексте охлаждения относится к компактному узлу насос-двигатель-резервуар, который работает от постоянного тока, чаще всего 24 В или 48 В, и обеспечивает циркуляцию жидкости для небольших или расположенных на краях узлов жидкостного охлаждения, где полный комплект трехфазного насоса переменного тока будет слишком велик или недоступен.
Насосные модули с приводом от постоянного тока чаще всего появляются в трех ситуациях: телекоммуникационные периферийные шкафы, в которых имеются только электростанции постоянного тока, контейнерные или модульные центры обработки данных, построенные для удаленных мест без стабильного трехфазного питания, и резервные резервные насосные агрегаты, которым необходимо поддерживать циркулирующую жидкость во время мгновенной передачи мощности переменного тока. В этих случаях гидравлический силовой агрегат постоянного тока действует как мускул внутри CDU, перемещая охлаждающую жидкость через коллектор и охлаждающие пластины, в то время как плата управления CDU управляет положением клапана, перепускным смешиванием и заданными значениями температуры.
Хорошо спроектированный CDU, построенный на основе архитектуры насоса постоянного тока, обычно включает в себя небольшую батарею или буфер суперконденсатора, поэтому накачка не прекращается даже на те несколько сотен миллисекунд, которые требуются автоматическому переключателю для переключения между сетевыми источниками питания, поскольку даже кратковременный перерыв в работе насоса может привести к появлению локализованных горячих точек на полностью загруженной холодной пластине графического процессора. Операторы связи, в частности, уже давно полагаются на установки постоянного тока 48 В для всего оборудования в шкафу, а расширение той же шины постоянного тока до охлаждающего насоса позволяет избежать необходимости в отдельном источнике переменного тока только для работы охлаждающего оборудования.
Выбор гидравлического силового агрегата постоянного тока для охлаждающей установки
Выбор размера следует той же основной физике, что и любой выбор насоса: требуемая скорость потока в зависимости от падения давления в системе определяет необходимую мощность двигателя, а затем на основе этого значения мощности выводятся напряжение постоянного тока и потребляемый ток. Небольшому блоку краевого охлаждения, поддерживающему одну стойку, может потребоваться только насос постоянного тока, потребляющий менее 150 Вт, в то время как более крупному блоку с коляской, построенному на шине постоянного тока для полного модуля, может потребоваться группа насосов и гораздо больший резервуар, и в этот момент многие операторы оценивают, имеет ли архитектура постоянного тока все еще смысл по сравнению со стандартной накачкой трехфазного переменного тока.
Вопросы надежности, характерные для модулей насосов постоянного тока
Поскольку гидравлические силовые агрегаты постоянного тока часто развертываются на периферийных площадках без обслуживающего персонала или с небольшим персоналом, резервирование и удаленная диагностика имеют даже большее значение, чем в укомплектованном персоналом зале обработки данных. Ищите головки насоса с двойным резервированием, использующие один резервуар, систему мониторинга потребления тока, которая может сигнализировать о выходе из строя подшипника двигателя до того, как он выйдет из строя, и контроллер, который может сообщать о состоянии через стандартный интерфейс, даже если на объекте нет ИТ-персонала, который мог бы физически осмотреть агрегат.
Основные компоненты современного CDU
- Пластинчатый теплообменник: передает тепло между объектом и технологическими контурами без смешивания жидкостей, обычно это паяные пластины из нержавеющей стали или титана.
- Резервные насосы: почти всегда используется в конфигурации № 1, поэтому отказ одного насоса не прерывает охлаждение.
- Фильтры твердых частиц предназначены для улавливания мусора размером до 25–50 микрон до того, как жидкость достигнет каналов холодной пластины.
- Трехходовые модулирующие клапаны, которые смешивают возвратную жидкость с питательной жидкостью для достижения фиксированной температуры технологического контура независимо от колебаний воды на объекте.
- Расходомеры и датчики перепада давления на каждой ветви стойки для раннего обнаружения засоров.
- Кабель обнаружения утечек или точечные датчики, расположенные в самой нижней точке корпуса и под соединениями коллектора.
- Расширительный бак или баллон для поглощения теплового расширения герметичного вторичного контура.
- Контроллер с сетевым подключением, обычно Modbus TCP или SNMP, для интеграции со стеком мониторинга центра обработки данных.
- Запорные клапаны как на стороне объекта, так и на стороне технологического контура, позволяющие обслуживать или заменять агрегат без слива воды из всего ряда.
- Локальная панель человеко-машинного интерфейса, обычно небольшой сенсорный экран, для настройки уставки на месте и просмотра сигналов тревоги.
Каждый из этих компонентов играет особую роль в общей надежности, и пропуск любого из них для снижения затрат обычно проявляется позже как проблема с обслуживанием или простоем, а не как первоначальная экономия. В частности, в бюджетных проектах часто упускают из виду запорные клапаны, а их отсутствие превращает рутинную замену насоса в событие, требующее слива и повторного заполнения всего вторичного контура ряда.
Правильный подбор охлаждающего распределительного устройства
Недостаточный размер CDU — самая распространенная и самая дорогая ошибка, которую допускают операторы, поскольку устройство, которое на бумаге выглядит адекватно при расчетной нагрузке, часто не может справиться с временными скачками мощности, которые производят современные кластеры графических процессоров во время обучающих импульсов. Три цифры имеют наибольшее значение при выборе размера.
Общая тепловая нагрузка в зависимости от номинальной мощности
Сложите расчетную тепловую мощность каждого компонента с жидкостным охлаждением в ряду, а затем примените запас прочности не менее 20 процентов для будущих обновлений стойки. Устройство, рассчитанное точно на сегодняшнюю нагрузку, не оставляет запаса, когда восемнадцать месяцев спустя клиент заменяет поколение ускорителя более высокой мощности, а модернизация CDU постфактум гораздо более разрушительна, чем указание дополнительной маржи с самого начала.
Приблизительная температура
Это разница температур воды объекта, поступающей в теплообменник, и воды технологического контура, выходящей из него. Более узкая температура, обычно от 2 до 3 градусов по Цельсию на хорошо спроектированных устройствах, означает, что CDU может подавать более холодную воду к чипам, даже когда вода на объекте становится теплой, что имеет большое значение в климате или сезонах, когда сухой охладитель не может производить очень холодную воду. Напротив, более широкая температура приближения вынуждает установку на объекте работать на более низкой температуре, чтобы компенсировать это, что увеличивает потребление энергии охладителем во всем здании.
Скорость потока на стойку
Большинство производителей охлаждающих пластин указывают требуемую скорость потока на ускоритель, часто в диапазоне от 1 до 3 литров в минуту на графический процессор. Умножьте это на количество ускорителей в стойке, а затем подтвердите, что номинальная кривая насоса CDU может поддерживать этот расход, несмотря на падение давления во всем коллекторе, трубках и быстроразъемных фитингах, поскольку одни лишь быстроразъемные соединения могут составлять значительную долю общих потерь давления в системе. Обычно команды выбирают насосы с учетом падения давления на холодной пластине и забывают добавить потери в коллекторе и фитингах, которые затем оказываются ниже ожидаемого расхода, когда система полностью построена.
Поведение при частичной нагрузке
Кластер редко постоянно работает на полной номинальной мощности. Периоды простоя, перерывы в планировании пакетных заданий и окна технического обслуживания создают условия частичной нагрузки, и CDU с насосами с регулируемой скоростью может снижать скорость в эти периоды для экономии энергии, а не работать с полным потоком независимо от фактической тепловой нагрузки. Конструкции насосов с фиксированной скоростью тратят измеримое количество энергии по сравнению с конструкциями с регулируемой скоростью, если принять во внимание реальные модели использования.
Требования к химическому составу жидкости и фильтрации
Жидкость вторичного контура — это не просто водопроводная вода. Большинство операторов используют деионизированную воду с пакетом ингибиторов коррозии или смесь пропиленгликоля, когда требуется защита от замерзания при установке на открытом воздухе или на краю. Необработанная или плохо отфильтрованная жидкость является основной причиной преждевременного выхода из строя охлаждающей пластины, поскольку накопление накипи и биологический рост со временем уменьшают диаметр внутреннего канала и повышают термическое сопротивление между стружкой и охлаждающей жидкостью.
Операторы обычно ежеквартально проверяют жидкость вторичного контура на pH, проводимость и растворенный кислород, а многие поставщики CDU теперь интегрируют встроенные датчики проводимости, которые сигнализируют, когда жидкость требует замены, прежде чем это ухудшит эффективность охлаждения. Согласно рекомендациям, опубликованным производителями охлаждающего оборудования и подтвержденным полевыми данными, предоставленными операторами колокейшн, использующими плотные блоки графических процессоров, хорошо обслуживаемый контур с непрерывной фильтрацией может работать от трех до пяти лет между полными заменами жидкости.
Распространенные типы жидкостей, используемые во вторичных контурах
Сравнение распространенных вариантов жидкости вторичного контура и того, где каждый из них обычно применяется. | Тип жидкости | Защита от замерзания | Относительная теплопередача | Типичное применение |
| Деионизированная вода | Нет | Самый высокий | Крытые залы данных со стабильной температурой |
| Смесь пропиленгликоля | От умеренного до высокого | Немного уменьшено | Уличные полозья и краевые площадки |
| Диэлектрическая жидкость | Зависит от рецептуры | Ниже воды | Баки погружного охлаждения в паре с CDU |
Лучшие практики фильтрации
На практике лучше всего работает многоуровневая фильтрация: фильтр грубой очистки на входе в CDU для улавливания крупного мусора, фильтр тонкой очистки от 25 до 50 микрон, расположенный до того, как жидкость достигнет коллектора, и контур байпасной фильтрации, который непрерывно очищает небольшой боковой поток жидкости даже во время работы основного контура. Этот многоуровневый подход улавливает большую часть загрязнений еще до того, как они достигнут холодной пластины, где плотные внутренние каналы создают реальный риск засорения даже мелких частиц.
Модели резервирования для развертываний CDU
Общие конфигурации резервирования для распределительных устройств охлаждения в залах производственных данных. | Конфигурация | Описание | Типичный случай использования |
| N | Один CDU на ряд без резервного блока | Кластеры разработки или тестирования |
| N 1 | Один дополнительный CDU, общий для нескольких рядов | Стандартное корпоративное размещение |
| 2Н | Полностью дублированные CDU и трубопроводы в каждом ряду. | Залы для обучения критически важному искусственному интеллекту со строгими целевыми показателями безотказной работы |
Резервирование насосов внутри одного шасси CDU рассматривается отдельно от резервирования на уровне модулей в ряду, и большинство спецификаций теперь требуют как двойных внутренних насосов, так и резервирования как минимум N 1 блока для любого развертывания, поддерживающего вычисления, приносящие доход. Это различие имеет значение, поскольку внутреннее резервирование насоса защищает от отказа одного насоса, в то время как сам CDU продолжает работать, тогда как резервирование на уровне агрегата защищает от отказа всего CDU, включая его теплообменник, контроллер или клапанный механизм.
Архитектура 2N, в которой каждый ряд имеет полностью дублированный CDU и независимый трубопровод, является наиболее устойчивой, но при этом примерно удваивает капитальные затраты на уровень распределения охлаждения, поэтому ее обычно резервируют для объектов, где даже кратковременное прерывание охлаждения может привести к неприемлемой потере длительной учебной работы или производственной нагрузки.
Мониторинг, контроль и интеграция с системами управления зданием
Современный CDU — это не только механическое устройство, но и источник данных. Каждое устройство, которое стоит развернуть сегодня, сообщает о скорости потока, температуре подачи и возврата в обоих контурах, перепаде давления, скорости насоса и потребляемом токе, состоянии фильтра и статусе утечки обратно на центральную платформу мониторинга. Эти телеметрические данные передаются в программное обеспечение для управления инфраструктурой центра обработки данных, где операторы могут напрямую соотносить эффективность охлаждения с ИТ-нагрузкой.
Пороги сигналов тревоги, которые стоит настроить
Помимо простых сигналов тревоги при высоких и низких температурах, хорошо управляемые предприятия настраивают сигналы тревоги со скоростью изменения, которые улавливают медленное приближение к проблеме задолго до того, как будет пересечен абсолютный порог. Например, скорость потока, которая постепенно снижается в течение нескольких недель, часто сигнализирует о приближении пропускной способности фильтра задолго до того, как сработает жесткий сигнал тревоги о низком расходе, а раннее обнаружение этой тенденции позволяет избежать незапланированной замены фильтра в период высокой нагрузки.
Интеграция с данными нагрузки ИТ
Предприятия, которые связывают телеметрию CDU непосредственно с данными о энергопотреблении сервера, могут создавать прогнозные модели, которые прогнозируют потребность в охлаждении до запланированной рабочей нагрузки, а не реагируют только на повышение температуры. Это особенно ценно для обучающих кластеров ИИ, где энергопотребление может резко меняться в течение нескольких секунд по мере того, как задание перемещается между фазами с интенсивными вычислениями и коммуникацией, а контур управления CDU, который может предвидеть эти колебания, работает заметно лучше, чем тот, который реагирует на температуру только постфактум.
Энергоэффективность и ее влияние на общее энергопотребление объекта
Поскольку жидкостное охлаждение передает тепло более эффективно, чем воздух, предприятия, которые переносят значительную ИТ-нагрузку на стойки, обслуживаемые CDU, обычно отмечают заметное улучшение общей эффективности энергопотребления объекта, поскольку механическое предприятие тратит меньше энергии на перемещение воздуха, и большая часть общего энергопотребления идет непосредственно на вычисления. Насосы с регулируемой скоростью внутри CDU еще больше сокращают паразитное потребление энергии, перекачивая только такой объем потока, который фактически требуется текущей тепловой нагрузке, вместо работы с фиксированной скоростью независимо от нагрузки.
Установки, в которых CDU сочетаются с сухим охладителем или контуром естественного охлаждения, также могут увеличить количество часов в году, в течение которых вообще не требуется никакого механического охладителя, поскольку жесткий контроль температуры CDU позволяет эффективно охлаждать даже умеренно теплую воду объекта. Согласно тематическим исследованиям, опубликованным производителями охлаждающего оборудования и научными исследователями эффективности центров обработки данных, операторы в более прохладном климате сообщают о значительном увеличении времени естественного охлаждения за счет сочетания CDU с низкой температурой приближения и хорошо настроенной стратегии управления сухим охладителем.
Распространенные ошибки при установке и вводе в эксплуатацию
- Пропуск испытания давлением азота во вторичном контуре перед заполнением его охлаждающей жидкостью, что позволяет небольшим утечкам оставаться незамеченными до тех пор, пока контур не окажется под напряжением.
- Неспособность тщательно промыть новый трубопровод, в результате чего остается производственный мусор, который впоследствии забивает каналы охлаждающей пластины.
- Размещение датчиков утечек только на уровне пола и отсутствие точек капель в соединениях верхнего коллектора.
- Недостаточный размер расширительного бака, что приводит к скачкам давления по мере нагрева контура при полной вычислительной нагрузке.
- Не проверяется кривая производительности насоса по фактическому падению давления, а не по теоретическому расчетному падению.
- Подключение быстроразъемных фитингов в неправильной ориентации, что может ограничить поток или помешать надлежащему герметичному уплотнению.
- Не учитываются требования к соединению и заземлению металлических трубопроводов, которые со временем могут привести к гальванической коррозии в разнородных металлических соединениях.
- Невозможность документировать базовые показания расхода и давления при вводе в эксплуатацию, что значительно затрудняет последующую диагностику постепенного отклонения производительности.
График текущего обслуживания для здорового CDU
Рекомендуемая периодичность технического обслуживания ключевых подсистем CDU на основе общих рекомендаций производителя. | Задача | Рекомендуемая частота |
| Проверка качества жидкости (pH, проводимость, растворенный кислород) | Ежеквартально |
| Проверка или замена сажевого фильтра | Каждые 3–6 месяцев |
| Проверка подшипников и уплотнений насоса | Ежегодно |
| Проверка загрязнения теплообменника | Ежегодно |
| Функциональная проверка датчика утечки | Раз в полгода |
| Полный ремонт или замена насоса. | Каждые 5–7 лет или за пороговое количество часов работы |
Устранение распространенных проблем с производительностью CDU
Падение расхода с течением времени
Постепенное снижение скорости потока почти всегда указывает на то, что фильтр приближается к пропускной способности или к раннему образованию накипи где-то в контуре. Проверка перепада давления на корпусе фильтра обычно является самым быстрым способом подтвердить причину, прежде чем планировать замену фильтра.
Повышение температуры приближения
Если разница между температурой подачи на объекте и температурой подачи в технологическом контуре становится больше, чем номинальная для агрегата, пластины теплообменника, вероятно, засоряются либо на стороне объекта, либо на стороне технологии, или поток объекта в агрегат упал из-за частично закрытого клапана в другом месте ряда.
Периодическая сигнализация утечки
Неприятные сигналы утечки часто вызваны образованием конденсата на линиях холодного водоснабжения во влажном помещении, а не фактической утечкой жидкости. Изоляция открытых холодных трубопроводов и подтверждение контроля влажности в помещении обычно решают эту проблему без необходимости вообще размыкать контур.
Неожиданная работа насоса
Насосы, которые быстро включаются и выключаются, а не работают стабильно с контролируемой скоростью, обычно указывают на недостаточный размер расширительного бака или воздушную пробку в контуре, из-за которой давление выходит за пределы диапазона заданных значений контроллера.
CDU и погружное охлаждение работают вместе
Резервуары погружного охлаждения, в которых целые серверы погружены в диэлектрическую жидкость, по-прежнему нуждаются в способе отвода тепла, поглощаемого жидкостью, и именно для этой цели обычно используется распределительный блок охлаждения. В этой конфигурации вторичный контур CDU обеспечивает циркуляцию диэлектрической жидкости через теплообменник, подключенный к резервуару, а не через холодные пластины, в то время как первичный контур по-прежнему подключается к водопроводу объекта так же, как и при использовании холодных пластин.
Основное конструктивное отличие заключается в том, что диэлектрические жидкости обычно имеют более низкую теплопроводность и более высокую вязкость, чем вода, поэтому насосы и теплообменники, рассчитанные на контур с холодной пластиной на водной основе, не подходят автоматически для погружного контура, и поставщики обычно предлагают отдельные линейки моделей CDU, специально настроенные на свойства диэлектрической жидкости.
Факторы затрат, выходящие за рамки покупной цены за единицу
Фиксированная цена блока распределения охлаждения составляет лишь часть общей стоимости развертывания. Трубопроводы, коллекторы, быстроразъемные фитинги, изоляция, лотки для локализации утечек и пуско-наладочные работы часто составляют аналогичную или большую долю общих затрат, особенно в проектах модернизации, где существующие фальшполы или подвесные пути не были спроектированы с учетом трубопроводов для жидкости. Текущие затраты включают замену жидкости, расходные материалы для фильтров и электроэнергию, потребляемую самими насосами, что составляет небольшую долю от общей мощности объекта, но ее все же стоит включить в долгосрочные эксплуатационные бюджеты.
На предприятиях, планирующих многоэтапное строительство, часто оказывается более экономичным установить более крупный CDU с коляской с запасом для будущих этапов, чем последовательно устанавливать несколько меньших блоков, поскольку трудозатраты на прокладку трубопроводов и ввод в эксплуатацию больше масштабируются в зависимости от количества отдельных мероприятий по установке, чем от физического размера одного блока.
Куда движется рынок
Внедрение жидкостного охлаждения быстро превратилось из нишевого высокопроизводительного вычислительного инструмента в основное требование для инфраструктуры обучения и вывода ИИ, что обусловлено непосредственно расчетной тепловой мощностью ускорителей, которая теперь регулярно превышает 700–1000 Вт на кристалл. Этот сдвиг подтолкнул производителей охлаждающих распределительных устройств к более крупным блокам с коляской и на уровне помещения, более жестким температурным режимам и архитектурам насосов, включая модули с приводом от постоянного тока, которые можно легче интегрировать с аккумуляторной и энергетической инфраструктурой на месте для непрерывной работы во время переключений мощности.
Предприятия, которые стандартизировали воздушное охлаждение всего три года назад, теперь переоборудуют технические помещения специально для размещения ряда CDU, а площадь, когда-то отведенная для систем обработки воздуха в компьютерных залах, вместо этого все чаще отводится под инфраструктуру жидкостного охлаждения. Поставщики также стремятся использовать более стандартизированные коллекторные и быстроразъемные интерфейсы, что снижает нагрузку на индивидуальное проектирование каждый раз, когда выводится новое поколение серверов, и упрощает операторам смешивание оборудования от нескольких производителей в одном ряду с жидкостным охлаждением.
Часто задаваемые вопросы
В чем разница между CDU и чиллером
Чиллер производит холодную воду для всего здания или дата-центра, отводя тепло и выбрасывая его наружу. Холодораспределительный блок сам по себе не производит охлаждение; он передает тепло из технологического контура уровня стойки в воду на объекте, которую охладитель уже охладил, сохраняя при этом два контура физически разделенными.
Может ли распределительная установка охлаждения работать без контура охлажденной воды на объекте?
Да, некоторые CDU сочетаются с сухим охладителем или контуром естественного охлаждения вместо механического охладителя, особенно в более прохладном климате, где температура наружного воздуха достаточно низкая в течение большей части года, чтобы отводить тепло без охлаждения с помощью компрессора. Также существуют жидкостно-воздушные CDU, которые вообще не требуют подключения к водопроводу.
Как часто следует обслуживать насосы CDU
Большинство производителей рекомендуют ежегодную проверку уплотнений насоса, подшипников и потребляемого тока двигателя, а полный ремонт или замену насоса обычно планируют через пять-семь лет в зависимости от количества часов работы и качества жидкости.
Какая скорость потока требуется для типичной стойки графического процессора?
Это зависит от конструкции охлаждающей пластины, но общий диапазон составляет от 15 до 40 литров в минуту для полностью заполненного сервера с восемью ускорителями, а это означает, что для стойки с несколькими такими серверами может потребоваться общий расход более 100 литров в минуту от CDU.
Зачем дата-центру использовать гидравлический блок постоянного тока вместо стандартного насоса переменного тока?
Модули насосов с приводом от постоянного тока выбираются, когда доступная инфраструктура электропитания объекта уже основана на постоянном токе, например, на телекоммуникационных объектах, или когда для развертывания требуется непрерывная накачка при коротких переходах переменного тока с использованием локального буфера батареи, а не полагаясь на время запуска генератора.
Что произойдет, если насос CDU выйдет из строя во время работы
В правильно спроектированной конфигурации насоса N 1 внутри CDU резервный насос автоматически берет на себя работу по расходу в течение нескольких секунд, а система управления зданием подает сигнал тревоги, чтобы обслуживающий персонал мог заменить вышедший из строя насос без сбоев.
Как контролируется риск утечки в стойке с жидкостным охлаждением?
Риск утечки контролируется с помощью быстроразъемных фитингов с сухим разрывом на каждом шланговом соединении, кабельных датчиков утечек, расположенных под коллекторами и в основании шкафа, а также вторичных защитных лотков, которые улавливают любую жидкость до того, как она достигнет серверной электроники или фальшпола.
Может ли один CDU обслуживать стойки разных производителей серверов
Да, при условии, что коллектор и быстроразъемные интерфейсы совместимы или адаптированы к правильным фитингам, один CDU может обслуживать смешанное оборудование в пределах его номинального расхода и производительности, что становится все более распространенным по мере того, как предприятия стандартизируют общие интерфейсы вторичного контура.
Как долго обычно хватает жидкости вторичного контура до замены?
При непрерывной фильтрации и периодических проверках качества жидкость вторичного контура обычно служит от трех до пяти лет, прежде чем потребуется полная замена, хотя результаты испытаний на электропроводность и pH должны определять фактический график замены, а не только фиксированную календарную дату.
Какова основная причина простоев, связанных с CDU?
Опыт работы нескольких операторов неизменно указывает на загрязнение жидкости и пренебрежение фильтрами как на основные причины ухудшения производительности, за которыми следуют расширительные баки недостаточного размера, которые вызывают отключения из-за давления в периоды высокой тепловой нагрузки.