网易首页 > 网易号 > 正文 申请入驻

AI算力集群迈进“万卡”时代,超节点为什么火了?

0
分享至

刚落幕的2025世界人工智能大会暨人工智能全球治理高级别会议(WAIC)上,华为展台展出一整面昇腾384超节点的“墙”。记者看到,不断有观众与之合影。

超节点(SuperPod)成为本届WAIC的热点。除了华为,WAIC期间,上海仪电还联合曦智科技、壁仞科技、中兴通讯发布国内首个光互连光交换GPU超节点光跃LightSphere X,新华三推出H3C UniPoD S80000超节点,超聚变也展出了超节点方案。业内人士预计这波超节点热度会延续下去。

超节点是一种应对大算力集群芯片协同问题的方案。通过整合算力芯片资源,在一个超节点内构建低延迟、高带宽的算力实体,让单个超节点尽可能大地释放算力,避免芯片空闲,提高算力利用效率,支撑千亿乃至万亿参数模型的训练和推理。

即便是在单颗算力芯片制程受限的情况下,超节点技术也能让集群性能继续提升。壁仞科技OCS超节点项目相关负责人董朝锋告诉记者,在国内,做超节点已经是个明显的趋势,随着算力集群迈入“万卡协同”时代,探讨未来算力的构建范式演进非常重要。

超节点为什么火了?

从千卡集群到万卡集群、十万卡集群,算力芯片集群越来越大,是因为大模型越来越大,参数量已经迈向万亿。要怎么做好算力支撑,业内不得不思考这个问题。

英伟达是较早布局超节点技术的代表厂商。英伟达GB300 NVLink72可以将72个GPU和36个CPU整合到单一平台。近期在布局超节点的国内厂商则包括AI芯片厂商和服务器厂商。

有芯片业内人士向记者举例,一个万亿参数模型训练可能是这样的:粗略估算需要1万张GPU,但为了具备容错能力,要有超过1万张GPU。此外,要具备多个超节点,每个超节点内有几十张GPU,超节点内部也有冗余、容错能力,包括秒级容错和分钟级故障恢复能力、调度能力。调度能力是指将万亿参数模型的训练分布到每个GPU上做并行计算。

在这个万卡算力芯片集群中,超节点是一个很核心的概念。董朝锋告诉记者,如果单机8卡可以跑一个70亿参数的模型,当模型参数达到千亿、万亿,就需要更多GPU服务器。然而,传统AI服务器的scale out(横向拓展)互连由于线性度关系会导致算力性能的损失。在没有超节点的情况下,机柜之间由于线性度的影响会有算力性能损失,导致“1+1”无法等于“2”。但如果有超节点,则能保证单个节点内的性能最优。

有从业者告诉记者,如果没有超节点,一个机箱单机8卡,只能做到每2卡之间的带宽、通信延迟一致。董朝锋告诉记者,超节点有两条路线,一是scale out横向拓展,二是scale up纵向拓展。纵向拓展即在一个节点内尽可能多地增加GPU,例如一个千卡集群中,每64卡是一个超节点,在这个超节点中,可以做到卡间、机间的通讯带宽、通讯基本一致。

超节点技术中,光互连是主流方向之一,属于光通信范畴。光互连有全光交换、全光互连、光互连电交换路线。业内人士告诉记者,与光互连电交换相比,光互连光交换可以依托于光芯片,将电交换能力转化成光交换能力,光的切换是纳秒级,因此可以灵活切换拓扑且带宽较高。光通信可保证集群与集群之间高带宽、低延迟。

此次上海仪电联合曦智科技、壁仞科技、中兴通讯发布的超节点方案就采用分布式光互连光交换技术,该方案使用曦智科技的光互连光交换芯片和壁仞科技的GPU液冷模组,搭载中兴通讯的AI服务器。新华三推出的超节点产品则基于以太协议和PCIe协议,可适用多种算力芯片,适用万亿级参数大模型训练和推理。此外,WAIC上展出的华为昇腾384超节点可通过总线技术实现384个NPU(神经网络处理器)之间的大带宽低时延互连。

超节点在国内越来越受到关注,其背后,是因为超节点技术成为提升芯片制程之外,另一条能提高芯片集群性能的路径。随着摩尔定律面临“失灵”风险,推进芯片制程演进的难度增大,提升单颗芯片的计算性能面临挑战,业界需要寻找新的方法来继续提升算力。

董朝锋告诉记者,在芯片提升制程之外,超节点技术是能让集群性能提升的方法之一。短期内,国产AI芯片在制程工艺上与世界顶尖水平存在客观差距,国内厂商可以通过超节点方案部署更大规模的芯片集群来弥补单点性能的不足,以量补质,也能通过超节点技术让集群性能继续提升。其中光芯片也可以不依赖于高制程。

有业内人士告诉记者,英伟达的互连方案相对封闭,自有GPU、配套软硬件,国内一些厂商则在做开放生态。相较英伟达全套自研的路线,国内还没有类似英伟达这样成系统的技术体系。近期国内很多厂商包括服务器厂商都在推广超节点,各家路线各不完全一样,还需要时间来证明技术优劣。总体而言,国内光通信技术在全球比较领先,与海外先进水平相比没有明显代差。

应对市场竞争

今年国产芯片在AI服务器中的占比已在提升。TrendForce集邦咨询数据显示,去年国内AI服务器芯片中,外购部分(包括英伟达、AMD)所占市场份额为63%。该机构最新预计,外购部分今年的占比将降至49%。

即便如此,海外芯片厂商仍重视中国市场。英伟达CEO黄仁勋在本月早些时候表示,英伟达将推出面向中国市场的全新GPU。

除了通过互连技术优化提升芯片集群的效率,国内芯片厂商在芯片设计、市场策略上也在寻找方法,应对市场竞争。

墨芯人工智能此次在WAIC上展出了S40等计算卡。该公司相关负责人告诉记者,与英伟达的竞争不能只在产品性能上下功夫,还可以采取迂回竞争的策略。英伟达的GPU是通用型GPU,可用于训练和推理,不会针对一些垂直行业专门作出改变,但国产芯片可以有一些改变。该公司的产品针对推理做了优化,集中面向AI推理场景,例如边缘计算一体机,在特定场景下可以有更快计算速度和更低功耗。

上述公司相关负责人告诉记者,很多芯片厂商主要面向稠密计算需求,该公司则采用软硬件结合的策略,在软件算法上采用稀疏计算技术。与稠密计算的卡不同,面向稀疏计算的卡对制程的要求不高,可以采用12nm制程。目前公司的产品比较适用于特定场景的小模型运算,后续将推出的新产品则定义为广义稀疏的产品,适用于大模型计算。

其他一些国产芯片厂商也避开了与海外AI芯片巨头的直接竞争。

云天励飞同样选择了AI推理场景。该公司在WAIC期间宣布将全面聚焦AI芯片,未来将重点围绕边缘计算、云端大模型推理和具身智能领域布局。云天励飞董事长兼CEO陈宁表示,云侧推理更多考虑多用户并行情况下的芯片硬件采购成本、集群电费等运营成本,边缘计算则对芯片硬件采购成本更敏感,且更注重芯片与场景结合时的有效算力。他判断,以AI大模型和各类AI算法、推理芯片为核心的AI技术,将在未来五年重新定义人类所有的电子产品。

后摩智能近日则推出新一代芯片,面向端边场景。该公司新一代端边大模型AI芯片后摩漫界M50在INT8精度下的算力为160TOPS,在bFP16精度下的算力为100TFLOPS。目前该公司的芯片面向平板、PC等消费终端,以及智能语音会议系统、运营商边缘计算场景。该公司还采用存算一体技术,解决传统芯片数据传输慢、功耗较高的问题。

后摩智能创始人、CEO吴强表示,定位端边大模型计算,一定程度上避开了和巨头竞争高壁垒产品和已固化的市场,此外,还可以发挥存算一体技术的优势,在新兴的AI PC、智能语音设备、具身智能等新兴赛道找到位置。

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
20多年前,村里寡妇说我糟蹋了她,我被打断腿赶出村,15年后我开着豪车回乡祭祖,她拉着一个少年跪在我车前说:这是你儿子

20多年前,村里寡妇说我糟蹋了她,我被打断腿赶出村,15年后我开着豪车回乡祭祖,她拉着一个少年跪在我车前说:这是你儿子

墨染尘香
2026-08-08 09:10:02
梦鸽李天一赴美不归?看到85岁李双江“现状”,原来杨洪基没说谎

梦鸽李天一赴美不归?看到85岁李双江“现状”,原来杨洪基没说谎

阿纂看事
2024-11-05 11:54:58
西安警方:权某已被依法刑事拘留

西安警方:权某已被依法刑事拘留

环球网资讯
2026-08-09 13:52:16
韩杰案引发连锁反应!儿科医生批量出走,行业困境亟待破局

韩杰案引发连锁反应!儿科医生批量出走,行业困境亟待破局

普陀动物世界
2026-08-09 06:27:23
姚明喜提40万豪车!CEO亲自到场接待,细节打破赠车传闻

姚明喜提40万豪车!CEO亲自到场接待,细节打破赠车传闻

叨叨话影
2026-08-07 19:38:10
跑滴滴接到超级大单,司机直呼够吹三年了

跑滴滴接到超级大单,司机直呼够吹三年了

用车指南
2026-08-08 10:01:38
记者:成都暂无与罗慕洛续约的意思,索罗金是中超薪水最高的中卫

记者:成都暂无与罗慕洛续约的意思,索罗金是中超薪水最高的中卫

懂球帝
2026-08-09 11:48:05
近视600度冲上热搜:为什么它被称为眼睛的“风险临界值”?

近视600度冲上热搜:为什么它被称为眼睛的“风险临界值”?

科普中国
2026-08-07 10:50:44
“新冠”来势汹汹,医生提醒:夏天吃他汀的人,切记不要碰这6物

“新冠”来势汹汹,医生提醒:夏天吃他汀的人,切记不要碰这6物

叙说医疗健康
2026-08-10 05:00:08
拉什福德回归穿曼联14号!卡里克或拿到正确使用说明,老特拉福德拟用掌声迎接

拉什福德回归穿曼联14号!卡里克或拿到正确使用说明,老特拉福德拟用掌声迎接

罗米的曼联博客
2026-08-10 07:01:44
外媒:美国国务院已通知国会,称拟将土耳其持有的部分美制武器转让给乌克兰

外媒:美国国务院已通知国会,称拟将土耳其持有的部分美制武器转让给乌克兰

环球网资讯
2026-08-09 13:09:09
对华开枪了!印度光伏板自己先倒了,4.5万人站街头,工厂全停工

对华开枪了!印度光伏板自己先倒了,4.5万人站街头,工厂全停工

凡知
2026-08-09 15:05:52
黄有龙澳洲赌债案落槌:2.8亿输光、2.7亿本金偿还、亿元利息主张

黄有龙澳洲赌债案落槌:2.8亿输光、2.7亿本金偿还、亿元利息主张

阿讯说天下
2026-07-02 09:56:50
倾家荡产也不能治愈?提醒:这9种病根本无法根治,别花冤枉钱

倾家荡产也不能治愈?提醒:这9种病根本无法根治,别花冤枉钱

阿兵科普
2026-08-09 11:22:37
穆斯卡特迎直面中超土帅第二胜,但败率仍高达61%,海港已破译保级密码?

穆斯卡特迎直面中超土帅第二胜,但败率仍高达61%,海港已破译保级密码?

上观新闻
2026-08-10 04:09:39
神仙打架!两款王炸新车定档:全系600km+6万级激光雷达,谁更香

神仙打架!两款王炸新车定档:全系600km+6万级激光雷达,谁更香

沙雕小琳琳
2026-08-10 00:54:27
基辅被导弹袭击,乌总统前往塞尔维亚,武契奇:希望能停战

基辅被导弹袭击,乌总统前往塞尔维亚,武契奇:希望能停战

一路荒凉如歌a
2026-08-10 06:35:27
65岁男人和37岁女人再婚,女人:他老折腾我,男人:夫妻就这样

65岁男人和37岁女人再婚,女人:他老折腾我,男人:夫妻就这样

惟来
2026-08-06 11:18:52
表面德高望重,背后一肚子“男盗女娼”!这3位名人,太令人意外

表面德高望重,背后一肚子“男盗女娼”!这3位名人,太令人意外

冰语历史
2026-08-10 00:47:44
马尔蒂尼谈辞职:原定我选国家队主帅,足协主席临时改协议

马尔蒂尼谈辞职:原定我选国家队主帅,足协主席临时改协议

懂球帝
2026-08-09 15:19:42
2026-08-10 07:23:00
第一财经资讯 incentive-icons
第一财经资讯
第一财经官方账号
262284文章数 623214关注度
往期回顾 全部

科技要闻

苹果官网:Mac电脑可配合苹果智能使用千问

头条要闻

39岁女演员破产失业 炒股亏掉20年积蓄靠年迈母亲接济

头条要闻

39岁女演员破产失业 炒股亏掉20年积蓄靠年迈母亲接济

体育要闻

豪尔赫·梅西去世,球王的人生导师离开了

娱乐要闻

刘嘉玲晒与周星驰合影,情谊深厚

财经要闻

伯克希尔罕见爆买200亿美元股票

汽车要闻

增配激光雷达 全新一代smart精灵1号限时权益价14.99万起

态度原创

本地
亲子
教育
手机
游戏

本地新闻

课本里的童年,绍兴正上演

亲子要闻

幼儿园老师喜欢的孩子,都有这几个生活能力

教育要闻

录取后不报到,空出的学位还会补录吗?

手机要闻

爆料称荣耀阔屏手机评估中,手机市场新变化

《昭和米国物语》GTX960能玩!不求画面一心整活?

无障碍浏览 进入关怀版