论
论坛助手
前几年去参观数据中心,最深的印象是轰鸣的风扇和永远吹不完的冷风。传统机房靠空调和风冷散热,一个机柜几千瓦就差不多了。可 AI 算力中心的单机柜功耗轻松冲到几十千瓦,风冷在这面前基本宣告投降,这就是液冷这两年突然爆火的背景。
先说为什么风冷不行。风冷靠空气带走热量,但空气的比热容和导热能力都很拉胯,风扇转速拉满也带不走高密度机柜的热量,还会带来巨大的噪音和电费。更要命的是,风冷需要很大的送风空间,机柜之间要留通道,机房的空间利用率上不去。AI 训练集群动辄上万张卡,用风冷的话机房面积和电费都是天文数字。
液冷的原理很直白:用液体的导热能力代替空气。目前主流有三条路线。第一是冷板式,服务器里发热大户比如芯片和显存上面贴一块冷板,冷却液在冷板里循环把热量带走,机柜其他部分还是风冷。这条路线改造成本最低,和现有架构兼容性最好,现在是落地最多的方案。第二是浸没式,把整台服务器泡进不导电的冷却液里,热量直接传给液体,散热效果最彻底,但运维麻烦,换个硬盘都要把机器捞出来擦干净。第三是喷淋式,冷却液直接喷到发热部件上,介于两者之间。
做选型的时候,几个实操点值得记下来。第一,看 PUE 只是起点,还要看 WUE,也就是水的使用效率,有些液冷方案用水量不小,在缺水地区反而是短板。第二,冷却液的选择是坑最多的地方,导电率、腐蚀性、挥发性、环保要求都要评估,有些便宜的冷却液长期用会腐蚀管路接头,漏液的风险比散热不足更可怕。第三,冷板式改造要确认原有机柜的承重和管路空间,液冷管路加上冷却液之后重量不小,老机房的地板承重和走线要重新核算。
运维层面的避坑经验:液冷系统的泄漏监测一定要做冗余,单点传感器失效等于裸奔;冷却液要定期检测水质和做更换,管路结垢之后散热效率会悄悄下降,性能问题查半天最后发现是水垢,这种故事在圈子里不少见。另外二次侧水质管理和军团菌防控这些细节,招标时容易被忽略,验收时一定要写进条款。
长期来看,随着单芯片功耗还在往上走,液冷从可选项变成必选项只是时间问题。现在的争论已经不是用不用液冷,而是用哪种液冷、管路怎么做、运维团队怎么建。对想入局的厂商来说,真正的门槛不在冷板本身,而在整套热管理系统的工程能力和长期运维经验,这块拼的是脏活累活的积累。
先说为什么风冷不行。风冷靠空气带走热量,但空气的比热容和导热能力都很拉胯,风扇转速拉满也带不走高密度机柜的热量,还会带来巨大的噪音和电费。更要命的是,风冷需要很大的送风空间,机柜之间要留通道,机房的空间利用率上不去。AI 训练集群动辄上万张卡,用风冷的话机房面积和电费都是天文数字。
液冷的原理很直白:用液体的导热能力代替空气。目前主流有三条路线。第一是冷板式,服务器里发热大户比如芯片和显存上面贴一块冷板,冷却液在冷板里循环把热量带走,机柜其他部分还是风冷。这条路线改造成本最低,和现有架构兼容性最好,现在是落地最多的方案。第二是浸没式,把整台服务器泡进不导电的冷却液里,热量直接传给液体,散热效果最彻底,但运维麻烦,换个硬盘都要把机器捞出来擦干净。第三是喷淋式,冷却液直接喷到发热部件上,介于两者之间。
做选型的时候,几个实操点值得记下来。第一,看 PUE 只是起点,还要看 WUE,也就是水的使用效率,有些液冷方案用水量不小,在缺水地区反而是短板。第二,冷却液的选择是坑最多的地方,导电率、腐蚀性、挥发性、环保要求都要评估,有些便宜的冷却液长期用会腐蚀管路接头,漏液的风险比散热不足更可怕。第三,冷板式改造要确认原有机柜的承重和管路空间,液冷管路加上冷却液之后重量不小,老机房的地板承重和走线要重新核算。
运维层面的避坑经验:液冷系统的泄漏监测一定要做冗余,单点传感器失效等于裸奔;冷却液要定期检测水质和做更换,管路结垢之后散热效率会悄悄下降,性能问题查半天最后发现是水垢,这种故事在圈子里不少见。另外二次侧水质管理和军团菌防控这些细节,招标时容易被忽略,验收时一定要写进条款。
长期来看,随着单芯片功耗还在往上走,液冷从可选项变成必选项只是时间问题。现在的争论已经不是用不用液冷,而是用哪种液冷、管路怎么做、运维团队怎么建。对想入局的厂商来说,真正的门槛不在冷板本身,而在整套热管理系统的工程能力和长期运维经验,这块拼的是脏活累活的积累。