去年一个深圳数据中心完成项目复盘:50个机柜、单柜30kW,选型会上冷板液冷、浸没式液冷、间接风冷三个方案摆在桌上。最后选了冷板——当时判断密度够用。一年半后扩容20个40kW AI算力机柜,冷板管路二次改造报价270万——当初整套系统才花了480万。
液冷路线的选型,本质上是三年后才兑现的预算决策。本文从扩容、运维、锁定效应三个维度拆解选型成本。
三种路线的本质差异
| 路线 | 散热方式 | 单柜上限 | 初期成本 | 核心代价 |
|---|---|---|---|---|
| 间接冷却 | 介质管路循环+风扇换热 | 15-20kW | 最低 | 再往上密度受限 |
| 冷板液冷 | 冷板直贴CPU/GPU导热 | 30-50kW | 中等 | 管路改造复杂 |
| 浸没式液冷 | 服务器直接浸泡 | 100kW+ | 最高 | 承重、介质管理、运维习惯 |
初期成本排序:间接 < 冷板 < 浸没。但这只是1/3的账本。
扩容成本:最贵的一页
冷板液冷扩容时,新机柜必须接入现有管路系统。如果初期管路设计余量不足——很多项目为控制预算,管径和CDU容量按第一批机柜最小规格配置——扩容时需切开管路重新接,甚至更换CDU。深圳项目如果初期多留30%管路余量,多花60万;没留,两年后花了270万,净多掏210万。
间接冷却扩容最灵活:增加独立空调模块即可,无需动管路。浸没式取决于部署策略:一体式机柜扩容独立;集中式浸没槽扩容时同样受初期设计容量限制。
判断标准:机柜分三批以上上架,选冷板需将管路余量做到未来需求上限的120%。多花15%-20%的管路预算,可省下200%的改造费。
运维成本:写在工资单上
间接冷却运维最接近传统风冷:介质每年检测一次浓度、pH、电导率,五年换一次。传统暖通工程师即可胜任。
冷板液冷多了一套二次侧管路系统。接头、快插、O型圈等点位巡检不可跳过,漏液风险真实存在。运维团队需同时具备制冷和液冷技能,人力成本高一个档位。
浸没式运维模式完全不同:服务器维护需从介质中吊出、沥干、擦拭、再放回,操作时间是传统运维的3-5倍。介质需定期取样检测酸值、粘度、水分含量。
判断标准:所在地招聘运维人员困难时,选冷板或浸没前需估算培训周期、人力缺口、备品备件和应急响应成本。
锁定效应:最隐蔽的成本
锁定效应是三种路线中最隐蔽也最贵的成本。
选间接冷却后换冷板或浸没,需改造承重、管路、供电全套基础设施,接近推倒重来。
选冷板液冷后换介质,不同品牌冷却液添加剂体系不同,混用可能引发腐蚀或沉积。更换CDU受管路接口规格限制,大概率只能在原供应商生态内选择。
选浸没式后换介质等于换槽体——不同介质的密度、相容性、热性能差异显著。长期浸泡后做过适配的服务器,改用其他冷却方式存在磨合风险。
目前合成烃路线的冷却液在材料兼容性方面具备天然优势:合成烃与大多数金属和非金属材料兼容,切换介质时无需更换管路和密封件,锁定风险相对可控。
按密度决策框架
- 单柜≤20kW:间接冷却值得考虑。改造成本最低,运维不变,扩容灵活。等密度升至30kW以上时液冷方案更成熟、成本更低。
- 单柜30-50kW、分批上架:冷板液冷是主流选择。管路余量做足,冷板与介质供应商尽量统一,避免多方责任纠纷。
- 单柜50kW+、持续增长:浸没式中长期TCO可能最低。省去的管路改造、空调电费、扩容成本,三年以上可拉平性价比。
最后一条通用标准:要求供应商提供过去三年客户的真实运维成本数据。 能拿出来的认真谈;只谈PUE和单柜密度的,需要谨慎评估。
Tags: 数据中心冷却液 液冷选型 浸没式冷却液 冷板液冷 合成烃冷却液