网易首页 > 网易号 > 正文 申请入驻

原生液冷不是液冷技术的“Pro Max”,Token工厂需要一次系统重构

0
分享至


智东西
作者 王涵
编辑 漠影

从年初的“小龙虾”OpenClaw爆火出圈开始,Agent的爆发便势不可挡。

从单一模型的阶段性训练与推理,到大模型训练、多模型协同推理和海量Agent持续运行……AI任务正在进入一个“永远在线”的新阶段。

在2026世界人工智能大会(WAIC 2026)上,中国工程院院士、清华大学计算机科学与技术系教授郑纬民曾提出,单智能体的Token消耗量可达传统对话应用的百倍至千倍级。随着海量Agent并发调用模型、读写记忆、编排任务、执行工具,Token的消耗速度正以指数级飙升。

Token需求的暴涨,直接推高了AI基础设施的规模天花板,千卡集群不够用了,万卡、十万卡正在成为前沿大模型训练的标配。

但数据中心的电力和空间是有限的,要想满足没有上限的Token需求,核心的方向是在单位空间内塞进更多算力,把算力密度逼到极致。

算力密度提升,单机柜功耗必然飙升,从数十千瓦跃升至数百千瓦,并进一步向MW级迈进。

但这时问题出现了。当单柜功率到达这个量级,传统冷板液冷方案会导致机柜散热跟不上、空间不够用、互连被干扰,三条瓶颈同时在有限的空间里收窄。

Token工厂想继续扩产,计算、散热、互连、供电不能再各自为政,必须从系统底层找到新解法。

原生液冷,这个从系统层面将计算、散热、互连、供电耦合的方案,开始出现在行业视野。

一、Token需求井喷,把传统液冷的三重困境逼出来了

Token需求爆发推高了单机柜功率,也把部署空间压到了极限。在这样的场景下,传统液冷的短板被急剧放大。原本在低功率密度下尚能运转的方案,如今在三个关键维度上同时亮起了红灯。

第一个困境是算力密度受限于全系统热管理。

高算力密度意味着单位空间内集成了更多芯片乃至HBM、内存、网卡、光模块等全系统部件,也意味着需要导出更多热量。在高密度部署下,传统冷板液冷“逐个加板”的方式终究难以追上全系统发热的增长速度。

一旦散热能力跟不上,芯片触发温度墙而降频,Token产出就从峰值开始持续衰减。散热跟不上,Token就掉速。

第二个困境是散热结构持续挤占计算空间。

当前冷板液冷占据了液冷数据中心市场93.5%的份额,但绝大多数方案的底层逻辑依然是将风扇、冷板、软管、分液器层层叠加。散热结构层层堆叠,不断挤占本属于计算单元的空间,进一步压缩单柜GPU的装载上限。

当机柜功率迈向MW级,这种空间矛盾被急剧放大:散热越复杂,挤占的空间越多,能放下的计算单元就越少,单柜Token产能上限就这样被锁死了。

第三个困境是散热与互连的冲突在MW级被放大。

Scale-up计算域扩大,需要更多计算节点和交换节点组成高带宽、低时延的统一系统。但在传统架构中,背板、线缆、风道、冷板、液路分别规划,互连路径被拉长,接口数量增加,通信时延上升。

当几十甚至上百颗GPU需要频繁同步数据时,哪怕微小的时延都会被成倍放大,多卡并行推理的整体效率被系统性压低。互连效率折损,Token生成就变慢。

三重困境指向同一个结论:Token工厂的问题已经超出了“散热”本身,而是计算、互连、供电、散热在有限空间内互相掣肘的系统性困局。

要同时摆脱这三重困境,必须从系统设计的源头重新思考——把计算、散热、互连、供电作为统一整体来规划。

二、原生液冷:从系统源头回应三重困境

那什么才是“从源头重新思考”的正确姿势?把冷板做大一点、把软管换粗一点……这些常规思路只能治标,要想治本,我们就需要换一种思路——原生液冷

传统液冷是“先定计算、再配散热”,在计算系统定型后再找空间塞液冷设备。原生液冷不是冷板液冷的“Pro Max”版,其本质区别体现在三个维度:

时间维度上,热设计从后置变为前置,不再是谁将就谁;在空间维度上,散热从分散覆盖走向全域管理,不再割裂;在逻辑维度上,优化的对象从单一散热部件上升为整个计算系统,计算、散热、供电、互连不再各自为政。

这种系统重构,正是沿着算力密度、空间密度和互连密度逐一展开,最终都指向Token产能

先看算力密度。原生液冷采用散热架构与计算架构协同的全系统热设计,通过一体化冷板与全域液冷重构,实现整个计算系统协同散热。

它跳出了传统冷板液冷架构分模块局部优化的思维惯性,将GPU、CPU、内存、网卡、光模块、SSD全部纳入统一热管理,整机柜算力密度可提升至传统方案的10倍以上

散热能力上去了,芯片在持续高负载下不掉频,Token产出稳定在峰值,不随时间衰减。


再看空间密度。原生液冷通过系统结构重构,充分释放计算部署空间,采用一体化冷板和极简工程设计,实现零软管、零线缆、零风扇,装配接口减少80%,流阻降低60%,释放50%设备空间用于芯片、内存和互连等核心单元。

同样的机柜空间,可承载的计算单元数量大幅跃升。散热不再挤占空间,单柜Token产能上限被彻底打开。


互连密度的突破同样重要。原生液冷采用无中背板正交直连架构,将计算节点与交换节点解耦,通过前后向最短路径构建高密、低时延的直连网络矩阵。

基于单GPU与Switch 4.8TB/s高速直连设计,64卡全互连架构可提供300TB/s互连带宽,支持224G高速数据传输。更短的互连路径意味着更低的通信时延、更高的多卡协同效率,让更多计算资源能够高效协同工作,集群整体Token吞吐能力被系统性拉高。


三、Agent时代需要两类算力底座,浪潮信息用原生液冷同时覆盖

从三重困境到三个维度的突破,原生液冷证明了系统重构的价值。

但架构逻辑成立之后,下一个更现实的问题是:这些能力最终如何落地为产品?Agent时代的算力底座,到底需要什么样的硬件支撑?

要回答这个问题,得先看清Agent的工作方式。一个Agent从接收指令到完成任务,要经历工具调用、记忆读写、任务编排、并行调度等多个步骤。而这些“编排调度”类任务,主要运行在CPU上。

换句话说,Agent的完整工作流是“两条腿走路”:GPU负责高速生成Token,CPU负责高效调度Agent。两类算力缺一不可,任何一端掉链子,整个Agent系统的响应速度都会被拖垮。

IT基础设施产品、方案和服务提供商浪潮信息,基于原生液冷架构,针对这两类需求分别推出了对应的高密整机柜产品。

先看GPU侧,浪潮信息的GPU原生液冷整机柜服务器,在48U空间内承载了千卡算力——单柜算力密度达到传统方案的10倍以上

它创新采用一体式SDAC冷板,将GPU、CPU、内存、网卡、光模块等热源在整块冷板上双面高密平面化部署,散热效率翻倍;互连方面,则首创无中背板MDP矩阵式直连架构,1024颗GPU与Switch之间通过高速直连形成高密全互连矩阵,支持千卡、万卡超大规模无损扩展


最终交出的成绩单是:单柜功率覆盖330kW至1MW,大模型吞吐达到146万tokens/s。一个MW级机柜就能撑起一条高产的Token产线,持续满速输出,不降频、不掉速。

但光有GPU还不够。浪潮信息同步推出了CPU原生液冷整机柜服务器,基于液冷OCM架构,单柜集成384颗CPU,支持4万以上Agent高并发运行,确保高负载下不掉频、不降速,让Agent的调度响应始终保持在低延迟状态。

GPU整机柜负责高速生产Token,CPU整机柜负责高效调度Agent——两类算力底座在统一的原生液冷架构下协同工作。

从Token生成到Agent执行,全链路不再有散热瓶颈拖后腿,也不再出现某一端掉速导致整体排队的情况。原生液冷系统性地支撑起算力产线,让Token从生成到执行始终保持高效。

结语:硬件趋同,系统架构能力才是Token产能天花板

当下,AI基础设施赛道硬件层面的差距正在收窄。各家厂商能采购到的核心器件几乎一样,芯片本身的性能天花板也越来越透明。你有的GPU,别人也有;你用的HBM,别人也能买到。单纯的硬件堆砌已经拉不开身位了。

当GPU、HBM、网络芯片逐渐趋同,电力和空间成为AI基础设施的硬约束时,真正的分水岭在于:谁能把这些相同的组件组织成更高效率的算力Token产线。

同样的千卡规模算力,放进不同的系统里,最终的Token产出可能差出30%甚至更多。差距不在芯片本身,而在芯片与芯片之间如何通信、热量如何导出、供电如何分配、空间如何利用……这些系统层面的设计选择,最终决定了每一颗芯片的性能有多少能被真正释放出来。

这就是系统架构能力的价值所在。

它是对算力转化上限的物理层定义:什么样的散热方案能让芯片持续满频运行?什么样的互连拓扑能让多卡协同不产生通信瓶颈?什么样的空间布局能在有限机柜里塞进最多的计算单元?

这些问题没有标准答案,考验的是在计算、散热、互连、供电之间权衡与协同的架构设计功底。

原生液冷,正是这种系统级创新的物理层体现。


特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
男生不掏40元坐景交车出不了华山,景区:怕游客不坐所以不敢贴价

男生不掏40元坐景交车出不了华山,景区:怕游客不坐所以不敢贴价

观世记
2026-08-03 17:17:43
卢象升:一个人的黄昏

卢象升:一个人的黄昏

无心镜
2026-08-03 08:10:46
发现一个现象:穷人的孩子找不到工作回家叫“啃老”;而有钱人的孩子一毕业,父母就给买房买车安排工作,叫孝顺听话懂事

发现一个现象:穷人的孩子找不到工作回家叫“啃老”;而有钱人的孩子一毕业,父母就给买房买车安排工作,叫孝顺听话懂事

不二大叔
2026-07-29 22:04:32
在美国军事压力下,伊朗强硬派或在霍尔木兹海峡控制权上做出重大让步。

在美国军事压力下,伊朗强硬派或在霍尔木兹海峡控制权上做出重大让步。

乐天WMQ
2026-08-03 13:03:58
又一批A股公司宣布:回购、增持!

又一批A股公司宣布:回购、增持!

中国基金报
2026-08-03 22:55:53
利物浦拒绝重启1亿欧交易:嫌他想去皇马 已转攻大巴黎边锋

利物浦拒绝重启1亿欧交易:嫌他想去皇马 已转攻大巴黎边锋

甜度百分百21
2026-08-03 18:18:46
56岁王菲与刘嘉玲在豪宅聚会,新剪短发穿一身黑出镜,美得似少女

56岁王菲与刘嘉玲在豪宅聚会,新剪短发穿一身黑出镜,美得似少女

蓓小西
2026-08-03 20:25:03
马筱梅带儿子逛街,认真给小汪宝挑玩具,状态超好少女感十足

马筱梅带儿子逛街,认真给小汪宝挑玩具,状态超好少女感十足

扒虾侃娱
2026-08-03 22:44:59
李在明掀桌子

李在明掀桌子

求实处
2026-08-03 00:02:28
赵祥松|竹知了

赵祥松|竹知了

祥松谈
2026-08-03 17:47:53
河北美女老板卢玉青去世,仅44岁,住别墅开保时捷,确诊前曾减肥

河北美女老板卢玉青去世,仅44岁,住别墅开保时捷,确诊前曾减肥

胡一舸南游y
2026-08-03 18:16:21
恭喜广东队!CBA第一内线有望加盟,曾被杜锋点名要人?

恭喜广东队!CBA第一内线有望加盟,曾被杜锋点名要人?

绯雨儿
2026-08-03 10:56:25
难怪特朗普不打伊朗了,58比32结果已定,美国专家:一个时代结束

难怪特朗普不打伊朗了,58比32结果已定,美国专家:一个时代结束

虎哥闲聊
2026-08-03 13:42:43
佟丽娅带儿子聚餐,给朵朵夹菜,网友热议:旁边女的什么眼神

佟丽娅带儿子聚餐,给朵朵夹菜,网友热议:旁边女的什么眼神

手工制作阿歼
2026-08-03 11:00:04
没办法!领导子女互相安置好工作,招聘全是戏,网友:早该查了!

没办法!领导子女互相安置好工作,招聘全是戏,网友:早该查了!

白米饭怎么吃
2026-08-01 19:58:31
奔驰新车官宣:8月6日,正式上市

奔驰新车官宣:8月6日,正式上市

科技堡垒
2026-08-02 11:16:56
中方必须无条件割让领土?美发话后,马来西亚叫嚣:中国放弃南海

中方必须无条件割让领土?美发话后,马来西亚叫嚣:中国放弃南海

梦想的现实
2026-08-04 00:30:53
局势大变!可携带核弹头!俄导弹闯入波兰领空,波兰战机紧急升空拦截,俄终于开始打击北约补给线,美英法集体失声

局势大变!可携带核弹头!俄导弹闯入波兰领空,波兰战机紧急升空拦截,俄终于开始打击北约补给线,美英法集体失声

爱吃醋的猫咪
2026-08-03 22:58:21
马德兴:FIFA未兑现承诺,重庆赛热身更有针对性

马德兴:FIFA未兑现承诺,重庆赛热身更有针对性

懂球帝
2026-08-03 11:41:22
移动像老太太!7次大满贯冠军遭13连败,球迷怒喷:别浪费外卡了

移动像老太太!7次大满贯冠军遭13连败,球迷怒喷:别浪费外卡了

全景体育V
2026-08-03 15:33:01
2026-08-04 01:24:49
智东西 incentive-icons
智东西
智东西,AI产业新媒体,专注报道人工智能的前沿技术发展,和技术应用带来的千行百业产业变革。
12372文章数 117145关注度
往期回顾 全部

科技要闻

“像魔法一样”的AI,只卖几分钱

头条要闻

银鹭与男子因兑奖发生纠纷后 转账1万元并附言"敲诈"

头条要闻

银鹭与男子因兑奖发生纠纷后 转账1万元并附言"敲诈"

体育要闻

马克龙介入FIFA危机 致电因凡蒂诺勿搞分裂

娱乐要闻

陈璇半蹲采访诺兰惹争议

财经要闻

美日联手,救得了日元吗?

汽车要闻

方程S系列将于成都车展发布内饰 9月上旬新车上市即交付

态度原创

教育
本地
家居
房产
数码

教育要闻

看完北京八中这2页暑假作业,才明白什么叫降维打击——

本地新闻

神仙也“蓉”漂,哪吒与八仙,皆是成都出品!

家居要闻

2026建博会(广州) 公装联探展交流活动

房产要闻

120亿注册资本,新巨头出现!崖州湾,真的要爆发了!

数码要闻

999元 米家无线洗地机5C开售:60℃高温烘干 滚刷干爽无异味

无障碍浏览 进入关怀版