网易首页 > 网易号 > 正文 申请入驻

“超节点”火了,AI算力有救了

0
分享至

21世纪经济报道记者孔海丽

近期,“超节点”在AI圈成为当红热词。

半个月之内,业界陆续推出了多款超节点方案,字节、阿里、腾讯的新一代服务器均将采用超节点设计,旨在突破单机性能瓶颈,满足激增的大模型应用需求。浪潮信息也于近日官宣了其超节点AI服务器——“元脑SD200”。

所谓超节点,英文名为SuperPod,最早由英伟达提出,是一种通过系统级架构创新,将大量计算芯片紧密耦合为单一高速互连域的技术。与简单堆砌多个集群不同的是,超节点是系统不断Scale Up的最优解。

厂商们向超节点涌入,将算力困境的解决方案从单点突破带向系统级重构,他们的探索有望推动AI产业突破算力瓶颈,解决当下最棘手的问题。

Scale Up成为突破算力瓶颈的必然选择

随着AI技术的飞速发展,大模型参数规模已突破万亿级别,如DeepSeek、Qwen、Kimi等开源模型的涌现,显著降低了技术门槛,推动了“智能平权”。然而,模型规模的膨胀也带来了前所未有的算力挑战。

更大规模(万亿参数)、更长上下文演进的发展趋势,导致推理时KV Cache需求剧增,远超当前单颗AI芯片乃至主流多卡服务器的承载极限。

同时,Agentic AI具备自主决策、连续任务执行、多模态交互等核心能力,Agent推理过程需要生成比传统模型多100倍的Token。

此外,Agent中的大模型输出往往是下一步的输入,要求推理速度越快越好,当前主流大模型API普遍拥有50-100 Tokens/s的推理速度,这对显存带宽提出了更高的要求。

构建更大规模的GPU集群有两种路径,分别是Scale Out和Scale Up,前者指的是横向扩展,增加节点的数量,Scale Up是纵向扩展,增加单节点的资源数量。

据中国科学院物理所介绍,每台服务器里,多塞几块GPU,这就是Scale Up。这时,一台服务器就是一个节点。通过网络,将多台电脑(节点)连接起来,这就是Scale Out。

对于单台服务器来说,受限于空间、功耗和散热,能塞入的GPU数量是有限的,一般也就8卡、12卡。塞入这么多块GPU,还要考虑服务器的内部通信能力是否能够支持。如果GPU互连存在瓶颈,那么就达不到Scale Up的预期效果。

单纯堆砌硬件不仅成本高昂,且难以实现线性性能提升,算力利用率低下。要想解决算力难题,依靠单芯片或小规模集群的性能提升已难以为继。

面对单点算力、显存的天花板,构建大规模Scale Up系统,通过并行计算技术(如专家并行、张量并行)将模型权重与KV Cache拆分到多个AI芯片上协同工作,是解决万亿参数模型推理挑战的唯一可行路径。

对模型进行更大尺度的拆分,可以进一步降低单芯片负载,释放空间容纳更多KV Cache,从而提升系统并发数与推理速度,实现降本提速。

浪潮信息副总经理赵帅接受采访时表示,我们需要构建大规模、高集成度的Scale Up系统,通过紧密耦合大量的AI芯片形成单一高速互连域,才能汇聚起超大显存池以承载模型,并通过优化互连拓扑与协议实现芯片间超低延迟、高带宽通信,从而满足万亿模型推理“放得下、算得快”的极致要求。

超节点这种加强版的Scale Up,在性能、成本、组网、运维等方面,有其巨大优势。

“超节点架构本质上也是系统化思维的产物。”赵帅说,超节点不是某一个点的突破,而是在现有技术、生态和成本约束下,从系统层面去打破芯片本身的性能边界,最大化用户价值。

超节点开放架构的生态价值

浪潮信息的“元脑SD200”超节点属于开放架构,以开放系统设计向上扩展支持64路本土GPU芯片,可以实现单机内运行超万亿参数大模型,支持多个领先大模型机内同时运行,也可以实现多智能体实时协作与按需调用,目前已经商用。

具体来看,在应用架构层面,浪潮信息基于Open Fabric Switch,构建了3D Mesh系统架构,实现了单机64路本土GPU芯片的高速互连。

同时,他们通过远端的GPU虚拟映射技术,突破了多Host交换域的统一编址难题,让显存的统一地址空间直接扩增了8倍。

由此,单机可以提供最大4TB的统一显存,和64GB的统一内存。这为万亿超长序列模型提供了充足的KV Cache空间。

超节点不只要求硬件能力,更考验软硬协同能力。

“超节点是一个软硬件协同系统,而不是一个纯硬件。”赵帅表示,多年来,从实验室到应用,再到用户POC的过程,浪潮信息围绕万亿参数大模型计算密集、通信敏感的特性,构建起了一整套软硬协同优化的系统方案。

在系统层面,元脑SD200对于全规约(All Reduce)、全聚集(All Gather)等典型通信算子,开展不同数据量大小的细粒度通信策略设计,如多层级通信机制等,实现通信延时进一步降低。同时依托开放的PD分离框架,支持异步KV Cache高效传输与差异化并行策略,在提升业务服务级别目标的同时保持对多元算力的兼容性,实现计算与通信架构的深度协同优化。

“开放架构”是赵帅强调的另一个关键词,他表示,基于开放架构设计的超节点,能够支持多样化芯片、开放AI框架及主流开发工具,在保障高性能、低延迟的同时,实现跨平台的良好兼容与灵活扩展,推动AI基础设施真正走向开放、可持续的发展路径。

开源开放,是中国AI产业的标志之一。当前,中国开源大模型已在全球范围内展现显著领先性,特别是以DeepSeek、Qwen、Kimi、GLM等为代表的新一代开源大模型浪潮,其意义已超越单一技术突破,正深刻重塑AI产业格局与发展路径。

超节点技术的兴起,则标志着服务器产业从单机竞争迈入了系统级能力重构的新阶段。

这不仅带来了算力的跃升,更对底层硬件、技术标准和产业协作模式提出了全面升级的要求。

赵帅表示,浪潮信息也希望通过开源开放生态链条的构建,促进标准统一和深化产业协作,最终驱动整个产业链的创新融合发展。

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
陈芋汐炸鱼!407C出现重大失误,依然排名第一,领先第2名53.35分

陈芋汐炸鱼!407C出现重大失误,依然排名第一,领先第2名53.35分

体育就你秀
2025-11-09 07:49:47
大家别被电视剧沉默的荣耀给骗了,真实的吴石将军其实是这样!

大家别被电视剧沉默的荣耀给骗了,真实的吴石将军其实是这样!

生性洒脱
2025-11-07 11:59:03
妻子手机半夜收到“父亲”信息,丈夫替妻子回复:他不在家,快来

妻子手机半夜收到“父亲”信息,丈夫替妻子回复:他不在家,快来

惟来
2025-11-09 19:01:19
太子集团好色陈志游艇淫乱派对细节曝光,助手称其专拣温柔女孩。

太子集团好色陈志游艇淫乱派对细节曝光,助手称其专拣温柔女孩。

环球趣闻分享
2025-11-08 13:40:07
英法德没想到,曾经无足轻重的匈牙利,竟然成为了新欧洲经济中心

英法德没想到,曾经无足轻重的匈牙利,竟然成为了新欧洲经济中心

百科密码
2025-11-04 16:25:52
再添新瓜!副院长和曾主任半年一块出差27次,网友:还挺频繁

再添新瓜!副院长和曾主任半年一块出差27次,网友:还挺频繁

坠入二次元的海洋
2025-11-09 15:05:46
蛇类不会无缘无故进入住宅,一旦入屋往往预示着这三件事情

蛇类不会无缘无故进入住宅,一旦入屋往往预示着这三件事情

青青会讲故事
2025-11-05 16:55:04
降息,突变!美联储,重磅来袭!

降息,突变!美联储,重磅来袭!

数据宝
2025-11-09 19:18:30
爆冷门!朱婷赛后拒绝采访含泪离场,教练回应引全网热议

爆冷门!朱婷赛后拒绝采访含泪离场,教练回应引全网热议

去山野间追风
2025-11-08 12:51:22
马筱梅挺孕肚带继女外出,小玥儿驼背揪衣角,这是缺乏安全感了吧

马筱梅挺孕肚带继女外出,小玥儿驼背揪衣角,这是缺乏安全感了吧

娱乐顺风车666
2025-11-08 09:30:48
郑丽文公开纪念吴石,蒋万安、侯友宜相继表态,民进党坐不住了!

郑丽文公开纪念吴石,蒋万安、侯友宜相继表态,民进党坐不住了!

老范谈史
2025-11-09 18:08:19
台湾终极解决方案:土地回归祖国,人员往来自由,两岸统一新路径

台湾终极解决方案:土地回归祖国,人员往来自由,两岸统一新路径

古事寻踪记
2025-11-09 07:07:20
世界上平原面积最大的五个国家

世界上平原面积最大的五个国家

世界纵横说
2025-11-05 11:29:37
蒋万安被问到对郑丽文祭拜吴石一事的看法时,彻底撕下伪装

蒋万安被问到对郑丽文祭拜吴石一事的看法时,彻底撕下伪装

放开他让wo来
2025-11-08 22:35:20
停职后续!祖院长曾医生的5种结局,哪个最有可能?

停职后续!祖院长曾医生的5种结局,哪个最有可能?

吃瓜局
2025-11-09 15:45:58
终结2连败重回前三!马克西31分7助,恩比德29+6+4,神兵20+17+10

终结2连败重回前三!马克西31分7助,恩比德29+6+4,神兵20+17+10

无术不学
2025-11-09 11:49:35
副院长祖雄兵被停职!他口中所谓的“纯洁婚外恋”,是自欺欺人

副院长祖雄兵被停职!他口中所谓的“纯洁婚外恋”,是自欺欺人

云舟史策
2025-11-09 07:16:52
陈芋汐没料到,周继红没料到,就连陈若琳也没猜着

陈芋汐没料到,周继红没料到,就连陈若琳也没猜着

小光侃娱乐
2025-11-09 10:55:03
全运会男篮小组赛后,郭士强重选这五人回归国家队,四人或退出

全运会男篮小组赛后,郭士强重选这五人回归国家队,四人或退出

老媹古装影视解说
2025-11-09 18:44:00
(周运)苏珊米勒每周星座运势11.10-11.15

(周运)苏珊米勒每周星座运势11.10-11.15

星译社
2025-11-09 19:29:32
2025-11-09 20:55:00
21世纪经济报道 incentive-icons
21世纪经济报道
中国商业新闻领导者
219280文章数 743269关注度
往期回顾 全部

科技要闻

黄仁勋亲赴台积电“讨要更多芯片”

头条要闻

“青云租”爆雷员工揭内幕:每人每月需投资30台手机

头条要闻

“青云租”爆雷员工揭内幕:每人每月需投资30台手机

体育要闻

他只想默默地拿走最后一亿美元

娱乐要闻

《繁花》事件影响:唐嫣工作被取消

财经要闻

10月CPI同比涨0.2% PPI同比下降2.1%

汽车要闻

钛7月销破2万 霜雾灰与青峦翠配色正式开启交付

态度原创

亲子
时尚
家居
本地
军事航空

亲子要闻

小龚大夫上线了

伊姐周六热推:电视剧《四喜》;电视剧《唐朝诡事录之长安》......

家居要闻

现代自由 功能美学居所

本地新闻

这届干饭人,已经把博物馆吃成了食堂

军事要闻

俄媒:俄军即将攻占乌克兰"第三首都"

无障碍浏览 进入关怀版