Почему следует отдавать приоритет блокам питания с жидкостным охлаждением для стоек сверхвысокой мощностной плотности

Современные центры обработки данных и высокопроизводительные вычислительные комплексы сталкиваются с растущей проблемой, поскольку плотность энергопотребления серверов продолжает возрастать, превышая традиционные пороговые значения охлаждения. Стойки сверхвысокой плотности энергопотребления, зачастую превышающие 30 кВт на стойку и достигающие в специализированных конфигурациях более 100 кВт, генерируют тепловые нагрузки, которые превосходят возможности традиционных систем воздушного теплового управления. Узким местом инфраструктуры теперь становится не только вычислительное оборудование, но и сам слой распределения электроэнергии, где источники питания сами по себе превращаются в значительные источники тепла и требуют выделенных тепловых решений. Переход к архитектуре источников питания с жидкостным охлаждением представляет собой принципиальный сдвиг в подходах, применяемых объектами для решения тепловых задач следующего поколения вычислительных рабочих нагрузок, особенно в кластерах обучения ИИ, узлах суперкомпьютеров «на периферии» и передовых телекоммуникационных инфраструктурах.

Бизнес-обоснование внедрения технологии источников питания с жидкостным охлаждением в средах с высокой плотностью обусловлено тремя взаимосвязанными факторами: физическими ограничениями воздушного охлаждения в ограниченных пространствах, эксплуатационными затратами на системы компенсации воздушного потока и растущим спросом на эффективное использование площади в премиальных центрах совместного размещения оборудования и корпоративных объектах. Когда плотность мощности в стойке превышает 20 кВт, источники питания с воздушным охлаждением требуют экспоненциально больших объёмов воздушного потока и сталкиваются с уменьшающейся отдачей в плане тепловых характеристик. Это порождает каскад инфраструктурных издержек, включая повышенное энергопотребление вентиляторов, акустическое загрязнение и преждевременное старение компонентов из-за повышенных рабочих температур. Технология жидкостного охлаждения, применяемая непосредственно к оборудованию преобразования электрической энергии, разрывает этот порочный круг, удаляя тепло непосредственно в месте его возникновения за счёт превосходной эффективности теплопередачи и позволяя объектам расширять пределы плотности при одновременном соблюдении стандартов надёжности и контроле операционных расходов.

Теплофизическая задача в системах сверхвысокоплотной подачи электроэнергии

Концентрация тепловыделения на стадиях преобразования энергии

Источники питания в высокоплотных стойках функционируют как промежуточные преобразовательные устройства, преобразующие переменное или постоянное напряжение распределительной сети объекта в стабилизированное низковольтное постоянное напряжение, пригодное для компонентов серверов. Этот процесс преобразования неизбежно приводит к выделению тепла потерь за счёт омических потерь в полупроводниковых элементах, магнитных компонентах и проводниках; типичные показатели КПД современных конструкций составляют от 92 % до 96 %. В источнике питания мощностью 10 кВт, работающем с КПД 94 %, необходимо постоянно рассеивать около 600 Вт тепловой энергии. При одновременной работе нескольких источников питания в одном шкафу стойки наряду с выделяющим теплоту вычислительным оборудованием суммарная тепловая нагрузка создаёт локальные «горячие точки», что снижает надёжность компонентов и устойчивость системы. Традиционные воздушные системы охлаждения источников питания полагаются на внутренние вентиляторы и радиаторы для передачи этого избыточного тепла в окружающий воздушный поток, однако такой подход сталкивается с фундаментальными ограничениями по мере роста температуры окружающей среды и снижения объёма доступного воздушного потока в плотно упакованных конфигурациях.

Пороговая плотность мощности, при которой воздушное охлаждение становится термически недостаточным, варьируется в зависимости от архитектуры стойки и условий помещения, однако опыт отрасли последовательно указывает на диапазон 25–30 кВт на стойку как на практический предел для традиционных систем принудительной вентиляции. При превышении этого значения поддержание температур в области p-n-переходов в пределах технических требований производителя требует либо чрезмерно высоких скоростей воздушного потока, что повышает уровень шума и энергопотребление, либо допущения повышенных рабочих температур, ускоряющих деградацию компонентов и увеличивающих частоту отказов. Архитектура блока питания с жидкостным охлаждением решает эту проблему за счёт применения прямых жидкостно-твердотельных тепловых интерфейсов в критических компонентах, генерирующих тепло, обычно с использованием холодных пластин, прикреплённых к полупроводниковым элементам питания и магнитным узлам. Такой подход использует превосходную удельную теплоёмкость и коэффициент теплопередачи жидких теплоносителей по сравнению с воздухом, обеспечивая эффективный отвод тепла даже в условиях высокой температуры окружающей среды, где воздушное охлаждение не способно поддерживать безопасные эксплуатационные параметры.

Нарушение воздушного потока и эффекты тепловой связи

В конфигурациях стоек сверхвысокой плотности блоки питания конкурируют с серверным оборудованием за ограниченные ресурсы воздушного потока внутри замкнутых корпусов. Блоки питания с воздушным охлаждением, размещённые в точках входа воздуха в стойку, нарушают заданные схемы воздушного потока, предназначенные для охлаждения серверов, вызывая турбулентность и снижая эффективную мощность охлаждения, доступную компонентам, расположенным ниже по потоку. Это явление, известное как тепловая связь, становится особенно проблематичным, когда блоки питания выбрасывают нагретый воздух непосредственно в зоны забора воздуха смежного оборудования. В результате возникает температурная стратификация внутри стойки, при которой серверы, установленные на разных вертикальных уровнях, попадают в существенно отличающиеся тепловые условия; это вынуждает операторов центров обработки данных снижать общую мощность нагрузки на стойку, чтобы защитить оборудование, находящееся в наименее благоприятных тепловых зонах. Реализация блоков питания с жидкостным охлаждением устраняет этот эффект связи за счёт отвода тепла по выделенным жидкостным контурам, независимым от инфраструктуры воздушного охлаждения, обслуживающей вычислительное оборудование, что позволяет каждой системе теплового управления работать с оптимальной эффективностью без взаимного влияния.

Стратегическое разделение охлаждения источников питания и охлаждения оборудования выходит за рамки непосредственных тепловых преимуществ и позволяет создавать более гибкую архитектуру стоек. Отсутствие необходимости поддерживать определённые воздушные потоки через оборудование распределения питания даёт проектировщикам центров обработки данных свободу оптимизировать размещение серверов с учётом управления кабелями, удобства обслуживания и максимизации плотности размещения. Эта архитектурная гибкость становится особенно ценной по мере приближения и превышения плотности мощности в стойке уровня 50 кВт, поскольку каждый кубический дюйм объёма стойки представляет собой значительную стоимость в премиальных центрах обработки данных. Кроме того, исключение воздуха, выходящего из источников питания, из контура охлаждения оборудования снижает нагрузку на охлаждающие устройства центра обработки данных (CRAC) и встроенные в ряд охладители, что обеспечивает измеримую экономию энергии на инфраструктурном уровне — эффект, накапливающийся в течение всего срока эксплуатации установки.

Экономические факторы, стимулирующие внедрение жидкостного охлаждения источников питания

Анализ совокупной стоимости владения при развертывании в условиях высокой плотности

Финансовое обоснование приоритизации технологии источников питания с жидкостным охлаждением требует всестороннего анализа совокупной стоимости владения, выходящего за рамки первоначальных капитальных затрат и охватывающего эксплуатационные энергозатраты, требования к техническому обслуживанию и эффективность использования мощности. Хотя блоки с жидкостным охлаждением, как правило, стоят на 15–30 % дороже аналогичных моделей с воздушным охлаждением при первоначальной покупке, эту разницу необходимо оценивать с учётом экономии на инфраструктуре, обеспечиваемой превосходными тепловыми характеристиками. В установках сверхвысокой плотности возможность размещения дополнительных вычислительных мощностей в существующих стойках напрямую транслируется в потенциал генерации выручки в средах колокации или в снижение затрат на расширение объектов в корпоративных развертываниях. Оператор объекта, способный безопасно разместить 60 кВт на стойку, используя блок питания с жидкостным охлаждением технология вместо 30 кВт с воздушным охлаждением эффективно удваивает потенциал выручки на уровне стойки, одновременно позволяя избежать капитальных затрат на строительство дополнительных площадей.

Эксплуатационное энергопотребление представляет собой ещё один значительный экономический фактор, способствующий применению жидкостного охлаждения в системах передачи электроэнергии. Воздушные источники питания в высокоплотных приложениях требуют значительной мощности вентиляторов для достижения необходимой скорости воздушного потока; при этом энергопотребление вентиляторов зачастую составляет 3–5 % от номинальной мощности источника питания. В 10-киловаттном воздушном устройстве это соответствует постоянной паразитной нагрузке в 300–500 Вт, которая не выполняет полезной работы, но при этом генерирует дополнительное тепло, требующее удаления системами охлаждения объекта. Конструкции источников питания с жидкостным охлаждением устраняют или резко снижают эту энергетическую «пеню» за счёт использования насосных систем объектного уровня, обслуживающих сразу несколько контуров охлаждения с существенно более высокой общей эффективностью. По данным отраслевых измерений, распределение жидкостного охлаждения на уровне объекта обычно потребляет 0,5–1,0 % от обслуживаемой нагрузки на прокачку, что означает снижение энергопотребления, связанного с охлаждением, на 60–80 % по сравнению с принудительным воздушным охлаждением на уровне оборудования. За типичный пятилетний эксплуатационный период эти энергосберегающие эффекты могут полностью компенсировать первоначальную капитальную надбавку и обеспечить дальнейшее снижение эксплуатационных затрат.

Эффективность использования пространства и оптимизация пропускной способности объекта

Премиальные объекты дата-центров в крупных городских агломерациях предполагают ставки аренды, при которых эффективность использования площадей становится критически важным экономическим фактором при принятии решений о проектировании инфраструктуры. Сверхвысокая плотность мощности в стойках, обеспечиваемая технологией источников питания с жидкостным охлаждением, позволяет операторам концентрировать вычислительные мощности на меньшей физической площади, снижая потребление площади на ватт и повышая общую загрузку объекта. Традиционный воздушно-охлаждаемый объект, спроектированный для средней плотности мощности в стойке 10 кВт, требует значительно большей площади пола для размещения эквивалентной вычислительной мощности по сравнению с объектом с жидкостным охлаждением, поддерживающим плотность 40–50 кВт на стойку. Эта разница в плотности напрямую приводит к снижению капитальных затрат на строительство объекта, уменьшению текущих расходов на аренду в случае колокации, а также повышает возможность размещения объектов в условиях ограниченной городской застройки, где доступная недвижимость ограничена. Экономическая выгода от эффективного использования площадей усиливается в случаях модернизации существующих объектов, когда они сталкиваются с ограничениями по мощности, что в противном случае потребовало бы дорогостоящего расширения здания или переезда в более крупные помещения.

Помимо простого повышения эффективности использования объема, архитектуры источников питания с жидкостным охлаждением позволяют более продуктивно использовать существующую электрическую и систему охлаждения при модернизации действующих объектов. Во многих устаревших центрах обработки данных, оснащённых системами распределения электроэнергии мощностью 200–300 Вт на квадратный фут, при применении жидкостного охлаждения можно значительно повысить плотность вычислительных мощностей, поскольку оно устраняет тепловое ограничение, накладываемое воздушными системами охлаждения. Вместо дорогостоящей модернизации электроснабжения для увеличения мощности эксплуатанты объектов могут внедрять системы источников питания с жидкостным охлаждением, которые позволяют существующей электрической инфраструктуре поддерживать более высокую плотность оборудования за счёт устранения теплового «узкого места». Такой подход к расширению мощности, как правило, обеспечивает снижение капитальных затрат на 40–60 % по сравнению с традиционными методами расширения и позволяет завершать проекты в сжатые сроки, минимизируя перерывы в бизнес-процессах. Возможность извлечь дополнительные производственные мощности из уже сделанных инвестиций в инфраструктуру представляет собой привлекательную финансовую отдачу, которая зачастую обеспечивает окупаемость в течение менее чем 24 месяцев в условиях высокой загрузки.

Преимущества в плане производительности и надежности в критически важных приложениях

Управление рабочей температурой и срок службы компонентов

Надёжность электронных компонентов проявляет экспоненциальную зависимость от рабочей температуры: согласно общепринятым моделям физики надёжности, частота отказов полупроводниковых элементов примерно удваивается при каждом повышении температуры перехода на 10 °C. Конструкции источников питания, обеспечивающие более низкую рабочую температуру за счёт эффективного теплового управления, демонстрируют измеримо более длительный срок службы и пониженную частоту отказов по сравнению с термически нагруженными аналогами. Источник питания с жидкостным охлаждением, в котором температура перехода на 20–30 °C ниже, чем у эквивалентного воздушного варианта, может обеспечить среднее время наработки на отказ в 2–4 раза большее, что приводит к снижению затрат на техническое обслуживание, меньшему числу простоев и повышению общей готовности системы. В задачах критически важных применений, где незапланированный простой влечёт за собой серьёзные финансовые или операционные последствия, повышение надёжности, обеспечиваемое жидкостным охлаждением, оправдывает его приоритетное применение даже при наличии первоначальной разницы в стоимости.

Преимущество систем регулирования температуры в блоках питания с жидкостным охлаждением проявляется в стабильности их характеристик при изменяющихся нагрузках и в различных окружающих условиях. Воздушные системы охлаждения подвержены значительным колебаниям температуры при изменении уровня нагрузки или при сезонных колебаниях эффективности систем охлаждения объекта, что может вызывать термические циклы, ускоряющие механизмы отказов, связанные с усталостью паяных соединений и корпусировок компонентов. Системы жидкостного охлаждения обеспечивают более стабильные рабочие температуры в широком диапазоне нагрузок благодаря высокой теплоёмкости и эффективности теплопередачи используемой охлаждающей среды, снижая термические циклические нагрузки и повышая долгосрочную надёжность. Данная эксплуатационная характеристика особенно ценна в приложениях с сильно изменяющейся рабочей нагрузкой, например, в средах пакетной обработки, где нагрузка на блок питания в течение суточного цикла эксплуатации может колебаться от 20 % до 100 % номинальной мощности. Термическая стабильность, обеспечиваемая технологией жидкостного охлаждения, защищает инвестиционную ценность оборудования, продлевая срок его службы и сокращая частоту дорогостоящих замен.

Развертывание на большой высоте и в суровых условиях

Географические и экологические ограничения создают сценарии развертывания, при которых технология источников питания с жидкостным охлаждением переходит от преимущественной к обязательной. Установки на большой высоте — выше 1500 метров — сталкиваются с пониженной плотностью воздуха, что ухудшает тепловые характеристики систем охлаждения принудительной циркуляцией воздуха и требует снижения номинальной мощности силового оборудования или применения дополнительных мер охлаждения. Такое эксплуатационное ограничение характерно для телекоммуникационных объектов в горных районах, узлов граничных вычислений (edge computing) в возвышенных местностях, а также научных установок на высоте. Системы источников питания с жидкостным охлаждением обеспечивают полную тепловую производительность независимо от плотности воздуха, устраняя необходимость снижения номинальной мощности из-за высоты и позволяя работать на полной мощности в географических зонах, где воздушное охлаждение потребовало бы использования завышенного по мощности оборудования или привело бы к снижению рабочей мощности. Эта возможность расширяет диапазон применимости инфраструктуры высокопроизводительных вычислений в регионы, ранее считавшиеся непригодными для размещения плотно упакованных конфигураций.

Промышленные и открытые среды с повышенной температурой окружающей среды, загрязнением пылью или агрессивными атмосферами создают дополнительные трудности, из-за которых предпочтительным решением становятся системы жидкостного охлаждения. Источники питания с воздушным охлаждением в таких средах требуют подачи воздуха через фильтры и регулярного технического обслуживания для предотвращения накопления загрязнений, которое затрудняет воздушный поток и ухудшает тепловые характеристики. Постепенное накопление пыли на рёбрах теплоотводов и лопастях вентиляторов снижает эффективность охлаждения, что приводит к необходимости более частого технического обслуживания и увеличению совокупных эксплуатационных расходов в течение всего срока службы. Конструкции источников питания с жидкостным охлаждением, оснащённые герметичными контурами охлаждения и имеющие минимальные требования к воздушному потоку, демонстрируют превосходную устойчивость к загрязнённым средам, сокращая потребность в техническом обслуживании и повышая готовность оборудования к эксплуатации. Объекты, расположенные в пустынных климатических зонах, в районах тяжёлой промышленности или в прибрежных зонах с воздухом, насыщенным солью, особенно выигрывают от изоляции от внешней среды, обеспечиваемой замкнутыми системами жидкостного охлаждения, что позволяет добиться надёжной работы в условиях, при которых воздушные системы охлаждения быстро вышли бы из строя.

Соображения, связанные с интеграцией, и требования к инфраструктуре

Инфраструктура жидкостного охлаждения на уровне объекта

Успешное внедрение технологии источников питания с жидкостным охлаждением требует согласованной инфраструктуры объекта, обеспечивающей подачу охлаждённой жидкости к местам установки оборудования и возврат нагретой жидкости на центральные холодильные установки. Инвестиции в такую инфраструктуру включают коллекторы распределения жидкости, быстроразъёмные соединители для подключения оборудования, системы обнаружения утечек, а также резервные насосные установки, гарантирующие непрерывную циркуляцию теплоносителя. Хотя такая инфраструктура предполагает дополнительные капитальные затраты по сравнению с объектами, использующими только воздушное охлаждение, эти инвестиции позволяют обслуживать несколько тепловых нагрузок — источники питания, серверы и сетевое оборудование, обеспечивая экономию за счёт масштаба, которая возрастает с увеличением плотности размещения оборудования на объекте. Современные реализации жидкостного охлаждения, как правило, используют контуры распределения холода на уровне объекта с температурой подаваемой жидкости 20–40 °C и перепадом температур (ΔT) 10–15 °C на нагрузке, при этом более тёплая жидкость возвращается на холодильные установки, где отвод тепла осуществляется с помощью чиллеров или систем прямого испарительного охлаждения в зависимости от климатических условий и целевых показателей энергоэффективности.

Выбор охлаждающей среды влияет как на эксплуатационные характеристики, так и на производительность систем источников питания с жидкостным охлаждением. Обычно объекты выбирают между диэлектрическими жидкостями, допускающими прямой контакт с электрическими компонентами, и водно-гликолевыми смесями, применяемыми в герметичных системах холодных пластин с электрической изоляцией. Водные охладители обеспечивают превосходные тепловые характеристики и более низкую стоимость, однако требуют тщательного контроля электропроводности и последствий возможных утечек. Диэлектрические жидкости обеспечивают встроенную электробезопасность, но обладают пониженной тепловой эффективностью и более высокой стоимостью. Для применений источников питания, где электрическая изоляция может быть обеспечена через интерфейсы холодных пластин, водно-гликолевые смеси с концентрацией 30–40 % представляют оптимальный баланс тепловой эффективности, защиты от замерзания и экономической целесообразности. Проектировщикам объектов необходимо согласовывать выбор охлаждающей среды для всего жидкостного оборудования, чтобы избежать операционной сложности, связанной с поддержкой нескольких типов жидкостей; поэтому ранние архитектурные решения имеют решающее значение для долгосрочного успеха.

Адаптации моделей обслуживания и технического обслуживания

Требования к техническому обслуживанию систем электропитания с жидкостным охлаждением отличаются от традиционных решений с воздушным охлаждением, что требует инвестиций в обучение персонала и адаптации процедур для команд, отвечающих за эксплуатацию объектов. Регулярное техническое обслуживание включает контроль качества охлаждающей жидкости для обеспечения соответствующих значений её электропроводности, pH и концентрации ингибиторов, защищающих компоненты системы от коррозии. Быстроразъёмные соединительные муфты требуют периодической проверки целостности уплотнений и правильности их функционирования, а системы обнаружения утечек — функциональной проверки для обеспечения своевременного выявления любых нарушений герметичности системы охлаждения. Эти мероприятия по техническому обслуживанию представляют собой дополнительные операционные задачи по сравнению с системами воздушного охлаждения, однако общий объём работ по техническому обслуживанию, как правило, снижается благодаря устранению отказов вентиляторов и уменьшению тепловых нагрузок на внутренние компоненты источников питания. Опыт отрасли показывает, что при зрелой эксплуатации систем жидкостного охлаждения частота вмешательств в техническое обслуживание снижается на 30–40 % по сравнению с эквивалентными системами воздушного охлаждения после завершения этапов обучения персонала и оптимизации процедур.

Возможность горячей замены блоков питания с жидкостным охлаждением требует тщательного проектирования, чтобы обеспечить безопасное отключение и замену таких блоков полевыми техниками без необходимости опорожнения контуров охлаждения объекта или риска утечки теплоносителя. Современные решения используют самогерметизирующиеся быстроразъёмные соединения, которые автоматически закрываются при извлечении оборудования, удерживая остаточный теплоноситель в зоне соединений и предотвращая загрязнение окружающей среды. Правильная процедура обслуживания включает изоляцию участка контура охлаждения, обслуживающего целевое оборудование, снижение давления в захваченном объёме теплоносителя и проверку герметичности соединений перед их разъединением. Эти процедурные требования добавляют незначительную временную задержку к операциям обслуживания по сравнению с простой заменой блоков питания с воздушным охлаждением; однако снижение частоты вмешательств в процесс эксплуатации благодаря повышенному уровню надёжности, как правило, приводит к сокращению общих трудозатрат на техническое обслуживание. Объекты, в которых приоритетным является применение блоков питания с жидкостным охлаждением, должны инвестировать в комплексную подготовку техников и поддерживать в наличии запасные комплекты быстроразъёмных соединений, чтобы минимизировать продолжительность операций обслуживания и обеспечить стабильное качество их выполнения.

Инвестиции в инфраструктуру с учётом будущих потребностей

Резерв масштабируемости для новых требований к рабочим нагрузкам

Вычислительная интенсивность новых рабочих нагрузок в области искусственного интеллекта, машинного обучения и передовой аналитики продолжает неуклонно повышать энергопотребление серверов: в системах следующего поколения с ускорением на базе графических процессоров (GPU) потребление энергии достигает 1–2 кВт на разъём процессора и 10–15 кВт на 2U-корпус сервера. Традиционная воздушная система распределения питания, установленная для оборудования текущего поколения, устаревает по мере внедрения систем следующего поколения, что вынуждает предприятия либо проводить дорогостоящие модернизации, либо сталкиваться с ограничениями мощности, снижающими их конкурентоспособность. Центры обработки данных, которые сегодня отдают предпочтение архитектуре источников питания с жидкостным охлаждением, создают запас тепловой мощности, позволяющий размещать оборудование будущих поколений без необходимости фундаментальной замены инфраструктуры. Превосходная способность к охлаждению жидкостных систем обеспечивает резерв масштабируемости, продлевающий срок полезного использования инфраструктурных инвестиций центров обработки данных, сохраняя их капитальную стоимость и позволяя избежать деструктивных проектов модернизации в периоды активной эксплуатации. Эта функция «защиты от устаревания» приобретает всё большую ценность по мере ускорения циклов обновления оборудования и роста плотности производительности в нескольких технологических областях.

Модульность, присущая современным конструкциям источников питания с жидкостным охлаждением, позволяет постепенно наращивать мощность, согласуя сроки капитальных вложений в инфраструктуру с реальным ростом спроса. Объекты могут развернуть первоначальную систему охлаждения, рассчитанную на текущие потребности, одновременно проектируя распределительные системы с запасом мощности для будущего расширения и добавляя мощность охлаждающих установок и ответвления распределительной сети по мере того, как рост рабочей нагрузки оправдывает дополнительные инвестиции. Такой подход отличается от воздушного охлаждения, где фундаментальные архитектурные ограничения зачастую требуют полной переработки проекта при превышении плотности размещения оборудования исходных проектных предположений. Возможность поэтапного масштабирования инфраструктуры жидкостного охлаждения снижает первоначальные капитальные затраты, одновременно обеспечивая техническую возможность поддержки будущих уровней плотности размещения, что оптимизирует финансовую эффективность инвестиций в инфраструктуру на многолетних планировочных горизонтах. Организации, отдающие приоритет технологиям источников питания с жидкостным охлаждением, получают конкурентные преимущества за счёт внедрения новых возможностей высокопроизводительных вычислений без ограничений со стороны инфраструктуры, которые могли бы замедлить темпы или ограничить масштабы развертывания.

Соответствие требованиям в области устойчивого развития и эффективности

Корпоративные обязательства в области устойчивого развития и нормативные требования, направленные на повышение эффективности, всё чаще влияют на решения, касающиеся инфраструктуры центров обработки данных, создавая дополнительные стимулы для внедрения блоков питания с жидкостным охлаждением. Превосходная энергоэффективность систем жидкостного охлаждения напрямую способствует снижению показателя эффективности использования электроэнергии (PUE), который стал ключевым показателем эффективности функционирования объектов. Устраняя паразитные нагрузки от вентиляторов и позволяя использовать охлаждающую воду с более высокой температурой — что повышает эффективность чиллеров или обеспечивает бесплатное охлаждение в течение увеличенного числа часов в году — блоки питания с жидкостным охлаждением вносят измеримый вклад в повышение энергоэффективности на уровне всего объекта. Организации, ставящие амбициозные цели по сокращению выбросов углерода, рассматривают технологии жидкостного охлаждения как необходимые инструменты для достижения целей в области энергоэффективности при сохранении вычислительной мощности, требуемой для бизнес-операций. Соответствие между требованиями к тепловым характеристикам и целями в области устойчивого развития создаёт стратегическую ценность, выходящую за рамки непосредственных операционных преимуществ.

Тепло, отбираемое в виде тепловых потерь от систем электропитания с жидкостным охлаждением, представляет собой потенциальный ресурс для отопления зданий, технологических нужд или интеграции в системы централизованного энергоснабжения на объектах, имеющих соответствующие тепловые нагрузки. В отличие от низкопотенциального тепла, теряемого воздушными системами охлаждения при температурах, едва превышающих температуру окружающей среды, контуры жидкостного охлаждения способны передавать тепло потерь в диапазоне 40–50 °C, что делает его полезным для отопления помещений, обеспечения горячей водой бытового назначения или технологических процессов. Перспективные объекты внедряют системы рекуперации тепла, позволяющие улавливать эту энергию потерь и направлять её на полезные цели, тем самым дополнительно повышая общую энергоэффективность и снижая углеродный след. Хотя реализация рекуперации тепла увеличивает сложность системы и требует наличия подходящих тепловых нагрузок в непосредственной близости от дата-центров, потенциал преобразования тепла потерь в полезную энергию представляет собой дополнительный источник ценности, укрепляющий экономическую обоснованность приоритетного применения систем электропитания с жидкостным охлаждением в соответствующих условиях развертывания.

Часто задаваемые вопросы

При каком пороговом значении плотности мощности жидкостное охлаждение блока питания становится обязательным, а не опциональным?

Точка перехода, при которой жидкостное охлаждение блока питания становится необходимым, а не просто выгодным, обычно находится в диапазоне от 25 до 35 кВт на стойку и зависит от условий окружающей среды в помещении и архитектуры воздушного потока. Ниже этого порога оптимизированное воздушное охлаждение с достаточным обеспечением воздушного потока способно поддерживать приемлемые тепловые характеристики, хотя жидкостное охлаждение может по-прежнему обеспечивать экономические преимущества за счёт снижения энергопотребления и повышения надёжности. При превышении 35 кВт на стойку решения на основе воздушного охлаждения сталкиваются с физическими ограничениями: требуемые скорости воздушного потока становятся нереалистичными, а рабочие температуры превышают допустимые пределы даже при максимальном обеспечении воздухом. При проектировании объектов с плотностью нагрузки на стойку 40 кВт и выше следует изначально предусматривать блоки питания с жидкостным охлаждением, а не пытаться применять решения с воздушным охлаждением, которые впоследствии потребуют дорогостоящей модернизации при достижении тепловых пределов.

Как соотносится надёжность блоков питания с жидкостным охлаждением с надёжностью зрелых решений с воздушным охлаждением?

Надежность источников питания с жидкостным охлаждением превышает надежность аналогов с воздушным охлаждением при правильной реализации, в первую очередь благодаря более низким рабочим температурам, что снижает тепловые нагрузки на полупроводниковые компоненты и устраняет отказы механических вентиляторов — распространённый вид неисправностей в устройствах с воздушным охлаждением. Отраслевые данные эксплуатации показывают, что среднее время наработки на отказ у конструкций с жидкостным охлаждением в 2–3 раза выше по сравнению с аналогичными решениями с воздушным охлаждением в высокоплотных приложениях. Ключевым условием является корректная реализация, включающая поддержание качества теплоносителя, предотвращение утечек за счёт применения качественных фитингов и обеспечение достаточной избыточности в системах распределения охлаждения. Центры обработки данных, поддерживающие надлежащую операционную дисциплину в отношении инфраструктуры жидкостного охлаждения, последовательно достигают более высоких показателей надёжности по сравнению с термически перегруженными развертываниями на основе воздушного охлаждения.

Можно ли модернизировать существующие центры обработки данных, внедрив в них источники питания с жидкостным охлаждением без масштабного строительства?

Возможность модернизации существующих объектов с установкой жидкостного охлаждения для источников питания зависит от наличия свободного пространства в инфраструктуре для размещения оборудования распределения охлаждающей жидкости, а также от геометрической совместимости жидкостных магистралей с уже проложенными трассами кабельных линий. Многие объекты успешно внедряют модернизацию систем жидкостного охлаждения, устанавливая модульные блоки распределения охлаждения, подключаемые к существующим чиллерным установкам или дополняющие охлаждающую мощность за счёт автономных систем. Процесс модернизации требует координации коллекторов распределения охлаждающей жидкости, которые обычно прокладываются по потолку или под подъёмными полами параллельно системам распределения электроэнергии, а также монтажа инфраструктуры быстроразъёмных соединений в местах установки стоек. Хотя проекты модернизации отличаются большей сложностью по сравнению с решениями, реализуемыми при новом строительстве, они остаются технически и экономически целесообразными для большинства объектов, особенно если сравнивать их с альтернативными затратами на расширение здания или переезд объекта для получения дополнительной мощности.

Какие требования к навыкам технического обслуживания предъявляет блок питания с жидкостным охлаждением к операционным командам?

Техническое обслуживание источников питания с жидкостным охлаждением требует от персонала эксплуатационных служб освоения компетенций в области управления химией теплоносителя, обнаружения утечек и процедур реагирования на них, а также правильных методов технического обслуживания быстроразъёмных соединителей. Большинство организаций достигают операционной квалификации посредством обучающих программ, предоставляемых производителем, которые длятся 2–3 дня и включают теоретические занятия и практические занятия под руководством инструктора, а также контролируемую практику в начальный период внедрения. Дополнительные требования к навыкам оказываются выполнимыми для команд, уже имеющих опыт эксплуатации механических систем центров обработки данных, поскольку многие концепции переносятся из систем отопления, вентиляции и кондиционирования воздуха (HVAC) зданий и систем охлаждения с использованием холодной воды. Организации, не располагающие внутренними экспертами, могут в качестве альтернативы заключить договоры с профильными сервисными провайдерами на техническое обслуживание систем жидкостного охлаждения в начальный период эксплуатации, одновременно развивая собственные компетенции, либо сохранять долгосрочные сервисные контракты, если масштаб эксплуатации не оправдывает создания специализированной внутренней группы экспертов.