为什么传统风冷已经不够用
数据中心散热技术正经历从风冷到液冷的范式转换。驱动力来自芯片功耗的持续攀升:Intel Xeon Platinum 8592+的TDP达350W,AMD EPYC 9754的TDP达400W,NVIDIA H100 SXM5的TDP达700W,B200更是达到1000W。单台2U服务器配置2颗CPU和4张GPU时,整机功耗可超过3000W,机柜功率密度达到30-40kW/柜。
传统风冷的物理极限在于空气的比热容仅为1.005 kJ/(kg·K),而水的比热容为4.2 kJ/(kg·K),是空气的4倍。当机柜功率密度超过15kW时,即使满配风扇也无法有效散热,CPU温度会触发降频保护,性能损失可达20-30%。更关键的是,风冷数据中心PUE通常在1.4-1.6之间,制冷能耗占总能耗的30-40%,在双碳目标下这一能耗水平已不可持续。
| 散热方式 | 冷却介质 | 比热容 kJ/(kg·K) | 导热系数 W/(m·K) | 可散热功率密度 |
|---|---|---|---|---|
| 风冷 | 空气 | 1.005 | 0.026 | ≤15kW/柜 |
| 冷板式液冷 | 水/乙二醇 | 3.5-4.2 | 0.6 | 30-60kW/柜 |
| 浸没式液冷 | 氟化液 | 1.0-1.2 | 0.07-0.15 | 100-200kW/柜 |
| 喷淋式液冷 | 介电液体 | 1.5-2.0 | 0.1-0.12 | 50-100kW/柜 |
冷板式液冷:最成熟的过渡方案
冷板式液冷是目前商业化最成熟的液冷方案,已有Dell、浪潮、联想、超聚变等主流厂商推出标准化产品。其原理是通过安装在CPU、GPU等高功耗芯片上的铜质冷板,将热量传递给内部流动的冷却液(通常为25%乙二醇水溶液),冷却液通过管路流回CDU(冷量分配单元)散热后循环使用。
冷板式液冷架构
完整冷板系统由以下组件构成:一次侧(冷却塔或干冷器→一次水管路→板式换热器)、二次侧(CDU→二次水管路→冷板→服务器)。一次侧和二次侧通过板式换热器隔离,一次侧使用自来水或冷却塔水,二次侧使用纯净的乙二醇水溶液。这种隔离设计避免了冷却塔水质对服务器内部管路的腐蚀。
冷板式液冷优势与局限
优势:技术成熟,兼容现有服务器形态(无需改变服务器主板设计);可实现PUE 1.15-1.25;与风冷可混用(内存、硬盘等低功耗部件仍用风冷),称为"混合冷却"。局限:仅冷却CPU和GPU等热点,内存和主板仍需风扇辅助散热;管路接头存在泄漏风险(年泄漏率约0.1%);对服务器运维有特殊要求,拔插CPU时需先排空冷板液体。
浸没式液冷:PUE最低的极致方案
浸没式液冷将整台服务器完全浸没在介电冷却液中,通过液体直接接触所有发热元件实现散热。根据冷却液是否沸腾相变,分为单相浸没和两相浸没两种子方案。
单相浸没式
使用不沸腾的氟化液(如3M Novec 7500),液体温度维持在40-50°C,通过泵循环到外部换热器散热。服务器主板、内存、硬盘全部浸入液体中。PUE可达1.03-1.08。
两相浸没式
使用低沸点氟化液(如3M Novec 649,沸点49°C),芯片发热使液体沸腾汽化,蒸汽上升至冷凝盘管冷凝回液体。利用相变潜热带走热量,散热效率极高。PUE可达1.02-1.05。但3M已于2022年宣布停产PFAS类氟化液,目前替代品研发正在进行中。
浸没式液冷的关键挑战
冷却液成本是最大障碍:3M Novec 7500单价约1500-2000元/加仑,一个10kW浸没槽需要约40加仑液体,仅冷却液成本就达6-8万元。此外,服务器材料兼容性需要验证(部分塑料和橡胶在氟化液中会溶胀);硬盘需要更换为密封充氦型号;服务器维护需要吊装设备将服务器从液槽中取出,操作复杂度高。
喷淋式液冷:维护最友好的折中方案
喷淋式液冷介于冷板和浸没之间,通过喷嘴将介电液体直接喷淋到服务器主板上的发热元件表面,液体吸收热量后流回底部集液槽循环使用。服务器安装在密封机柜中,顶部设有喷淋分配器。
喷淋式的核心优势是维护方便:打开机柜门即可拔插服务器,无需排空液体或吊装操作。散热效率高于冷板式(液体直接接触芯片表面),低于浸没式(无法完全覆盖所有元件)。PUE可达1.1-1.2。目前主要厂商包括中科曙光和阿里巴巴,商业化程度低于冷板式。
三种方案综合对比
| 对比维度 | 冷板式 | 浸没式 | 喷淋式 |
|---|---|---|---|
| PUE | 1.15-1.25 | 1.02-1.08 | 1.10-1.20 |
| 散热功率密度 | 30-60kW/柜 | 100-200kW/柜 | 50-100kW/柜 |
| 技术成熟度 | 高(规模化部署) | 中(试点阶段) | 低(研发阶段) |
| 冷却液成本 | 低(乙二醇水溶液) | 高(氟化液) | 中(介电液体) |
| 服务器改造 | 小(加装冷板) | 大(特殊主板) | 中(喷淋适配) |
| 运维复杂度 | 中 | 高 | 低 |
| 泄漏风险 | 中(接头泄漏) | 低(密封槽体) | 低(密封机柜) |
| 单柜部署成本 | 15-25万元 | 40-60万元 | 20-35万元 |
CDU冷量计算方法
CDU(冷量分配单元)是冷板式液冷系统的核心设备,负责冷却液循环和热量交换。选型CDU时需要精确计算所需的冷量,计算公式如下:
# CDU冷量计算公式
# Q = m × Cp × ΔT
# Q: 所需冷量 (kW)
# m: 冷却液质量流量 (kg/s)
# Cp: 冷却液比热容 (kJ/(kg·K))
# ΔT: 服务器进出液温差 (°C)
# 示例:计算一台5kW服务器的所需流量
# 乙二醇水溶液 Cp = 3.5 kJ/(kg·K)
# 设计温差 ΔT = 10°C(进液25°C,出液35°C)
# Q = 5kW
# 流量计算: m = Q / (Cp × ΔT)
# m = 5 / (3.5 × 10) = 0.143 kg/s
# 转换为体积流量: 0.143 / 1.05 (密度) = 0.136 L/s = 8.2 L/min
# 对于一个10柜、每柜30kW的液冷机房:
# 总冷量 = 10 × 30 = 300kW
# 所需CDU冷量 = 300 × 1.2 (安全余量) = 360kW
# 建议配置2台200kW CDU (N+1冗余)
CDU的供液温度直接影响服务器散热效果和系统能耗。供液温度越高,自然冷却(Free Cooling)可利用时间越长,能耗越低,但服务器芯片温度也会升高。推荐供液温度设置为25-32°C,兼顾散热效果和能效。
液冷与风冷TCO对比
以一个100个机柜、每柜20kW功率密度的数据中心为例,对比风冷和冷板式液冷的5年总拥有成本:
| 成本项目 | 风冷方案(万元) | 冷板液冷(万元) | 节省比例 |
|---|---|---|---|
| 空调系统初投资 | 800 | 350(CDU+管路) | -56% |
| 服务器液冷改造 | 0 | 300 | 新增成本 |
| 5年电费(PUE 1.5 vs 1.2) | 1800 | 1440 | -20% |
| 5年制冷维保 | 150 | 80 | -47% |
| 5年冷却水费 | 60 | 25 | -58% |
| 5年TCO合计 | 2810 | 2195 | -21.9% |
液冷方案虽然服务器改造增加了300万元初投资,但由于PUE从1.5降至1.2,5年电费节省360万元,加上制冷系统维保和水费节省,5年TCO总节省615万元,投资回收期约2.5年。
实际部署案例
某互联网公司AI训练集群部署了200台搭载8卡NVIDIA H100的液冷服务器,单柜功率密度45kW。采用冷板式液冷方案,配置4台200kW CDU(3+1冗余),供液温度28°C。实测PUE 1.18,相比原风冷机房PUE 1.55,年节电约350万度,折合减碳2800吨。运维方面建立管路泄漏在线监测系统(每30秒采集一次流量和压力数据),设置三级告警阈值,运行12个月未发生液体泄漏事件。
液冷方案选型建议
机柜功率密度15kW以下可继续使用风冷或行级空调;15-30kW区间推荐冷板式液冷,性价比最优;30-60kW区间冷板式液冷是唯一成熟选择;60kW以上需考虑浸没式液冷,但需评估冷却液供应链稳定性和运维团队能力。信创和政企客户优先选择冷板式方案,因其已有国产化成熟产品且运维体系与风冷兼容。AI训练集群等超高密度场景,在冷却液供应保障的前提下可探索浸没式方案。

