网易首页 > 网易号 > 正文 申请入驻

原生液冷不是液冷技术的“Pro Max”,Token工厂需要一次系统重构

0
分享至


智东西
作者 王涵
编辑 漠影

从年初的“小龙虾”OpenClaw爆火出圈开始,Agent的爆发便势不可挡。

从单一模型的阶段性训练与推理,到大模型训练、多模型协同推理和海量Agent持续运行……AI任务正在进入一个“永远在线”的新阶段。

在2026世界人工智能大会(WAIC 2026)上,中国工程院院士、清华大学计算机科学与技术系教授郑纬民曾提出,单智能体的Token消耗量可达传统对话应用的百倍至千倍级。随着海量Agent并发调用模型、读写记忆、编排任务、执行工具,Token的消耗速度正以指数级飙升。

Token需求的暴涨,直接推高了AI基础设施的规模天花板,千卡集群不够用了,万卡、十万卡正在成为前沿大模型训练的标配。

但数据中心的电力和空间是有限的,要想满足没有上限的Token需求,核心的方向是在单位空间内塞进更多算力,把算力密度逼到极致。

算力密度提升,单机柜功耗必然飙升,从数十千瓦跃升至数百千瓦,并进一步向MW级迈进。

但这时问题出现了。当单柜功率到达这个量级,传统冷板液冷方案会导致机柜散热跟不上、空间不够用、互连被干扰,三条瓶颈同时在有限的空间里收窄。

Token工厂想继续扩产,计算、散热、互连、供电不能再各自为政,必须从系统底层找到新解法。

原生液冷,这个从系统层面将计算、散热、互连、供电耦合的方案,开始出现在行业视野。

一、Token需求井喷,把传统液冷的三重困境逼出来了

Token需求爆发推高了单机柜功率,也把部署空间压到了极限。在这样的场景下,传统液冷的短板被急剧放大。原本在低功率密度下尚能运转的方案,如今在三个关键维度上同时亮起了红灯。

第一个困境是算力密度受限于全系统热管理。

高算力密度意味着单位空间内集成了更多芯片乃至HBM、内存、网卡、光模块等全系统部件,也意味着需要导出更多热量。在高密度部署下,传统冷板液冷“逐个加板”的方式终究难以追上全系统发热的增长速度。

一旦散热能力跟不上,芯片触发温度墙而降频,Token产出就从峰值开始持续衰减。散热跟不上,Token就掉速。

第二个困境是散热结构持续挤占计算空间。

当前冷板液冷占据了液冷数据中心市场93.5%的份额,但绝大多数方案的底层逻辑依然是将风扇、冷板、软管、分液器层层叠加。散热结构层层堆叠,不断挤占本属于计算单元的空间,进一步压缩单柜GPU的装载上限。

当机柜功率迈向MW级,这种空间矛盾被急剧放大:散热越复杂,挤占的空间越多,能放下的计算单元就越少,单柜Token产能上限就这样被锁死了。

第三个困境是散热与互连的冲突在MW级被放大。

Scale-up计算域扩大,需要更多计算节点和交换节点组成高带宽、低时延的统一系统。但在传统架构中,背板、线缆、风道、冷板、液路分别规划,互连路径被拉长,接口数量增加,通信时延上升。

当几十甚至上百颗GPU需要频繁同步数据时,哪怕微小的时延都会被成倍放大,多卡并行推理的整体效率被系统性压低。互连效率折损,Token生成就变慢。

三重困境指向同一个结论:Token工厂的问题已经超出了“散热”本身,而是计算、互连、供电、散热在有限空间内互相掣肘的系统性困局。

要同时摆脱这三重困境,必须从系统设计的源头重新思考——把计算、散热、互连、供电作为统一整体来规划。

二、原生液冷:从系统源头回应三重困境

那什么才是“从源头重新思考”的正确姿势?把冷板做大一点、把软管换粗一点……这些常规思路只能治标,要想治本,我们就需要换一种思路——原生液冷

传统液冷是“先定计算、再配散热”,在计算系统定型后再找空间塞液冷设备。原生液冷不是冷板液冷的“Pro Max”版,其本质区别体现在三个维度:

时间维度上,热设计从后置变为前置,不再是谁将就谁;在空间维度上,散热从分散覆盖走向全域管理,不再割裂;在逻辑维度上,优化的对象从单一散热部件上升为整个计算系统,计算、散热、供电、互连不再各自为政。

这种系统重构,正是沿着算力密度、空间密度和互连密度逐一展开,最终都指向Token产能

先看算力密度。原生液冷采用散热架构与计算架构协同的全系统热设计,通过一体化冷板与全域液冷重构,实现整个计算系统协同散热。

它跳出了传统冷板液冷架构分模块局部优化的思维惯性,将GPU、CPU、内存、网卡、光模块、SSD全部纳入统一热管理,整机柜算力密度可提升至传统方案的10倍以上

散热能力上去了,芯片在持续高负载下不掉频,Token产出稳定在峰值,不随时间衰减。


再看空间密度。原生液冷通过系统结构重构,充分释放计算部署空间,采用一体化冷板和极简工程设计,实现零软管、零线缆、零风扇,装配接口减少80%,流阻降低60%,释放50%设备空间用于芯片、内存和互连等核心单元。

同样的机柜空间,可承载的计算单元数量大幅跃升。散热不再挤占空间,单柜Token产能上限被彻底打开。


互连密度的突破同样重要。原生液冷采用无中背板正交直连架构,将计算节点与交换节点解耦,通过前后向最短路径构建高密、低时延的直连网络矩阵。

基于单GPU与Switch 4.8TB/s高速直连设计,64卡全互连架构可提供300TB/s互连带宽,支持224G高速数据传输。更短的互连路径意味着更低的通信时延、更高的多卡协同效率,让更多计算资源能够高效协同工作,集群整体Token吞吐能力被系统性拉高。


三、Agent时代需要两类算力底座,浪潮信息用原生液冷同时覆盖

从三重困境到三个维度的突破,原生液冷证明了系统重构的价值。

但架构逻辑成立之后,下一个更现实的问题是:这些能力最终如何落地为产品?Agent时代的算力底座,到底需要什么样的硬件支撑?

要回答这个问题,得先看清Agent的工作方式。一个Agent从接收指令到完成任务,要经历工具调用、记忆读写、任务编排、并行调度等多个步骤。而这些“编排调度”类任务,主要运行在CPU上。

换句话说,Agent的完整工作流是“两条腿走路”:GPU负责高速生成Token,CPU负责高效调度Agent。两类算力缺一不可,任何一端掉链子,整个Agent系统的响应速度都会被拖垮。

IT基础设施产品、方案和服务提供商浪潮信息,基于原生液冷架构,针对这两类需求分别推出了对应的高密整机柜产品。

先看GPU侧,浪潮信息的GPU原生液冷整机柜服务器,在48U空间内承载了千卡算力——单柜算力密度达到传统方案的10倍以上

它创新采用一体式SDAC冷板,将GPU、CPU、内存、网卡、光模块等热源在整块冷板上双面高密平面化部署,散热效率翻倍;互连方面,则首创无中背板MDP矩阵式直连架构,1024颗GPU与Switch之间通过高速直连形成高密全互连矩阵,支持千卡、万卡超大规模无损扩展


最终交出的成绩单是:单柜功率覆盖330kW至1MW,大模型吞吐达到146万tokens/s。一个MW级机柜就能撑起一条高产的Token产线,持续满速输出,不降频、不掉速。

但光有GPU还不够。浪潮信息同步推出了CPU原生液冷整机柜服务器,基于液冷OCM架构,单柜集成384颗CPU,支持4万以上Agent高并发运行,确保高负载下不掉频、不降速,让Agent的调度响应始终保持在低延迟状态。

GPU整机柜负责高速生产Token,CPU整机柜负责高效调度Agent——两类算力底座在统一的原生液冷架构下协同工作。

从Token生成到Agent执行,全链路不再有散热瓶颈拖后腿,也不再出现某一端掉速导致整体排队的情况。原生液冷系统性地支撑起算力产线,让Token从生成到执行始终保持高效。

结语:硬件趋同,系统架构能力才是Token产能天花板

当下,AI基础设施赛道硬件层面的差距正在收窄。各家厂商能采购到的核心器件几乎一样,芯片本身的性能天花板也越来越透明。你有的GPU,别人也有;你用的HBM,别人也能买到。单纯的硬件堆砌已经拉不开身位了。

当GPU、HBM、网络芯片逐渐趋同,电力和空间成为AI基础设施的硬约束时,真正的分水岭在于:谁能把这些相同的组件组织成更高效率的算力Token产线。

同样的千卡规模算力,放进不同的系统里,最终的Token产出可能差出30%甚至更多。差距不在芯片本身,而在芯片与芯片之间如何通信、热量如何导出、供电如何分配、空间如何利用……这些系统层面的设计选择,最终决定了每一颗芯片的性能有多少能被真正释放出来。

这就是系统架构能力的价值所在。

它是对算力转化上限的物理层定义:什么样的散热方案能让芯片持续满频运行?什么样的互连拓扑能让多卡协同不产生通信瓶颈?什么样的空间布局能在有限机柜里塞进最多的计算单元?

这些问题没有标准答案,考验的是在计算、散热、互连、供电之间权衡与协同的架构设计功底。

原生液冷,正是这种系统级创新的物理层体现。


特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
杭州知名炒货店老板方林富去世,享年56岁,亲力亲为开炒货店37年,住院期间还千叮万嘱“店不能关”,大家称他:本土炒货界的守夜人

杭州知名炒货店老板方林富去世,享年56岁,亲力亲为开炒货店37年,住院期间还千叮万嘱“店不能关”,大家称他:本土炒货界的守夜人

都市快报橙柿互动
2026-09-03 21:55:54
苏州惊现“超级中学”:新初一96个班、5000多人!教育局回应:没钱建新校

苏州惊现“超级中学”:新初一96个班、5000多人!教育局回应:没钱建新校

听心堂
2026-09-04 07:36:24
新华社消息|灵活就业人员等参加职工医保将更便利

新华社消息|灵活就业人员等参加职工医保将更便利

新华社
2026-09-04 13:20:09
有人问,要是当年国民党赢了,老蒋主政中国,中国后来会是什么样子?

有人问,要是当年国民党赢了,老蒋主政中国,中国后来会是什么样子?

z千年历史老号
2026-09-03 18:18:17
康熙晚年体衰,每晚让一个16岁宫女伺候,太医不解,宫女羞愧回答

康熙晚年体衰,每晚让一个16岁宫女伺候,太医不解,宫女羞愧回答

小莜读史
2026-09-01 12:41:39
开学见闻!上海一所小学,生源差距一目了然

开学见闻!上海一所小学,生源差距一目了然

手工制作阿爱
2026-09-04 11:50:48
知名摇滚歌手“魔岩三杰”何勇去世,年仅57岁,晚年饱受精神病困扰

知名摇滚歌手“魔岩三杰”何勇去世,年仅57岁,晚年饱受精神病困扰

裕丰娱间说
2026-09-04 13:14:55
想当合成员国?埃尔多安打错算盘!中俄绝不容忍第二个印度闯进来

想当合成员国?埃尔多安打错算盘!中俄绝不容忍第二个印度闯进来

何蕥室内设计
2026-09-04 12:01:15
视同缴费年限必须全国统一按100%算,这是走出养老金不平等第一步

视同缴费年限必须全国统一按100%算,这是走出养老金不平等第一步

你在偷看谁
2026-08-28 21:23:18
17岁女孩怀孕,妈妈:女儿还是处女!医生:年轻人蹭蹭也会怀

17岁女孩怀孕,妈妈:女儿还是处女!医生:年轻人蹭蹭也会怀

大果小果妈妈
2026-09-02 13:28:47
美军头一次这么狼狈!后撤1000公里还要被炸,拖家带口连夜跑路

美军头一次这么狼狈!后撤1000公里还要被炸,拖家带口连夜跑路

凡知
2026-09-02 00:12:30
午评|一个信号!A股又出问题!A股咋办?

午评|一个信号!A股又出问题!A股咋办?

龙行天下虎
2026-09-04 11:35:46
52岁黄渤受伤真相曝光!骑车摔倒锁骨骨折,曾带伤为那英演出捧场

52岁黄渤受伤真相曝光!骑车摔倒锁骨骨折,曾带伤为那英演出捧场

娱说瑜悦
2026-09-04 13:20:29
孕肚明显!34岁超模路边摊买水果,二胎进入倒计时

孕肚明显!34岁超模路边摊买水果,二胎进入倒计时

时光慢旅人
2026-09-03 09:14:34
拍完新龙门客栈,梁家辉对张曼玉说:以后除了拍戏,咱俩别联系,这样对你我都好

拍完新龙门客栈,梁家辉对张曼玉说:以后除了拍戏,咱俩别联系,这样对你我都好

草莓解说体育
2026-08-10 16:30:35
泪奔!程梦圆遗体腐臭,哥亲手抬棺送老家,哭着说:妹怕黑 咱回家

泪奔!程梦圆遗体腐臭,哥亲手抬棺送老家,哭着说:妹怕黑 咱回家

番外行
2026-08-12 09:01:40
公安部百日行动严查!普通人务必避开5件事,千万别心存侥幸

公安部百日行动严查!普通人务必避开5件事,千万别心存侥幸

娱乐圈见解说
2026-09-03 03:33:34
逃到海外3年,丁玉梅再迎噩耗,原来许家印还给她留了一张底牌

逃到海外3年,丁玉梅再迎噩耗,原来许家印还给她留了一张底牌

乐天闲聊
2026-08-27 09:53:36
平安回家了吗?曾赴西藏网友接到摸排电话:好想哭,希望每通电话都有人接

平安回家了吗?曾赴西藏网友接到摸排电话:好想哭,希望每通电话都有人接

观察者网
2026-09-03 23:52:08
特大丑闻!范辰、江丞华律师被重庆两江新区法院拦在法庭外 ,里面却照常缺席开庭

特大丑闻!范辰、江丞华律师被重庆两江新区法院拦在法庭外 ,里面却照常缺席开庭

宾语观世
2026-09-03 17:56:25
2026-09-04 14:07:00
智东西 incentive-icons
智东西
智东西,AI产业新媒体,专注报道人工智能的前沿技术发展,和技术应用带来的千行百业产业变革。
12547文章数 117166关注度
往期回顾 全部

科技要闻

OpenAI深夜王炸!GPT-6 Astra来了

头条要闻

媒体:美国G20相关会议声明单独"点名"中国 十分罕见

头条要闻

媒体:美国G20相关会议声明单独"点名"中国 十分罕见

体育要闻

小卡来去10首轮,快船7年彩礼一场空

娱乐要闻

王宝强冯清八年未领证!真相令人泪目

财经要闻

GPT-6 Astra上线,AGI时代真到来了吗?

汽车要闻

限时权益价28.99万起 FREELANDER神行者8正式上市

态度原创

艺术
游戏
本地
时尚
公开课

艺术要闻

中国最美的殡仪馆

《异克斯小队》科隆试玩报告:灭害专员快乐工作的一天

本地新闻

扒完小作文,富豪们私藏的度假胜地有多绝

美拉德+黑白蓝,太好看了!

公开课

李玫瑾:为什么性格比能力更重要?

无障碍浏览 进入关怀版