网易首页 > 网易号 > 正文 申请入驻

WAIC 2026 直击:云天励飞发布未来算力蓝图,三款芯片+超节点直指“百亿Token一分钱”

0
分享至

来源:市场资讯

(来源:雷峰网)

7月18日,云天励飞在2026 WAIC公布未来两年多AI推理芯片路线图。公司计划推出DeepVerse100P、DeepVerse100D、DeepVerse100L三款芯片,分别针对AI推理中Prefill、Decode和Decode FFN环节的负载特征进行专用优化。

三款芯片将面向万卡异构集群进行协同设计与部署,通过对不同推理阶段进行解耦,为不同负载配置更加适配的芯片和算力资源,进一步提升系统整体效率,持续降低Token生成成本。


推理负载持续分化,算力优化走向精细化

从负载特征来看,当前大模型推理应用正在形成不同类型:以对话、知识问答为代表的通用AI助手,以复杂推理、编程为代表的深度推理应用,以及以Agentic Coding、多Agent协同为代表的实时智能体系统。

随着AI应用不断深入,单次任务的上下文长度、推理链路复杂度以及实时交互要求持续提高,对推理系统的吞吐、延迟和成本提出了更高要求。对于大规模推理部署而言,峰值算力已难以单独反映系统效率,计算、访存、互联和系统调度等因素,共同影响Token生成效率和成本。

大模型推理不同阶段的计算特征也存在明显差异。Prefill需要集中处理输入上下文,对计算能力要求较高;Decode采用逐Token生成方式,对内存带宽和数据访问效率更加敏感。随着MoE等模型架构发展,Decode阶段内部的Attention与FFN在计算、访存等方面也呈现出不同的资源需求。

针对推理负载的变化,云天励飞计划在未来推出DeepVerse100P、DeepVerse100D和DeepVerse100L三款云端大算力推理芯片。

DeepVerse100P面向百万级上下文Prefill场景打造。在传统混部架构中,长上下文Prefil与Decode共享算力与带宽资源,会造成资源抢占,对Decode生成吞吐造成影响。

DeepVerse100D面向Decode环节打造专用推理引擎,拥有数倍于主流芯片的内存带宽,支持1024卡Scale-up及光互联系统架构。通过按需建立光路直连,并根据任务动态重构光路,减少传统多跳电交换和静态组网中的排队、拥塞及中间转发开销,降低多节点通信阻塞和尾延迟,提高逐Token输出的稳定性。

DeepVerse100L面向Decode 阶段计算密集型的FFN环节,采用3D Memory架构,相比主流HBM,大幅提升内存带宽,并通过低延迟芯片互联和激活数据快速传输,提高计算与通信的并行效率。


三款芯片协同面向万卡异构集群

随着AI推理进入规模化部署阶段,芯片优化也正由单颗性能提升,进一步走向多芯协同和集群级效率优化。

在万卡规模的推理集群中,系统效率并非单卡性能的简单叠加。不同推理负载对计算、内存和通信资源的需求存在明显差异,当Prefill与Decode、Attention与FFN共享同一套通用算力资源时,容易产生资源竞争。与此同时,随着集群规模扩大,通信阻塞、资源等待和尾延迟等问题也会进一步影响整体推理效率。

因此,提升Token生成效率,除了优化单颗芯片性能,还需要围绕芯片在集群中的协同,对推理过程中的计算、访存、互联和资源配置进行系统级设计。

基于DeepVerse100P、DeepVerse100D和DeepVerse100L,云天励飞计划推动三款芯片在万卡异构集群中的分离式部署与协同运行。按照Prefill、Decode 和Decode FFN的不同负载特征,分别配置相应芯片和资源池,并通过高速互联形成协同运行的异构算力系统。

这一芯片协同方案围绕Token生成全过程进行系统优化。通过对不同推理阶段进行分离,降低不同负载之间的资源干扰,并根据实际需求配置计算、访存和通信资源,从而提升集群资源利用率和整体推理效率。

从面向特定推理负载进行芯片优化,到不同芯片之间的协同,再到万卡级集群应用,云天励飞正在将AI推理芯片的优化范围由单颗性能延伸至集群级效率。

面向“百亿Token一分钱”的长期目标,云天励飞希望以三款芯片为核心,形成一套服务于大规模Token生成的“推理工厂”,通过芯片、互联、软件和系统的协同优化,提高算力产出效率,持续降低单位Token成本。


IFWA软件栈:降低国产算力应用门槛

硬件异构程度和集群规模不断提升,也对软件栈提出了更高要求。模型能否快速完成适配、算子性能能否得到充分释放、不同硬件资源能否高效协同,直接影响DeepVerse芯片在大规模集群中的实际运行效率。

围绕DeepVerse芯片及其集群应用,云天励飞持续建设IFWA软件栈,覆盖AI模型开发、编程及系统等不同层级,为模型适配、算子优化、编译部署和软硬件协同提供软件支撑。

在兼容性方面,IFWA围绕Transformer主流架构,持续完善PyTorch ATen算子的适配和性能优化,并加强对vLLM、SGLang等主流推理框架的支持。通过兼容主流软件接口、复用成熟开源组件,降低模型向DeepVerse平台迁移和部署的成本。

在模型适配和开发效率方面,IFWA构建了覆盖模型量化、压缩、编译和部署的一站式自动化工具链,并引入AI Agent参与推理芯片适配和性能优化。

此前,云天励飞已开源Houmao多Agent异构编程框架,由不同Agent协同完成模型开发、算子开发、性能优化和测试验证等任务,将部分依赖人工经验的芯片软件开发流程转化为自动执行、自动验证和持续优化,缩短新模型和新算子的适配周期。

与此同时,云天励飞还将成熟的Triton算子能力融入FlagOS,通过代码贡献、联合验证和社区复用,推动相关能力在国产AI软件生态中进一步共享,减少不同硬件平台在算子适配上的重复投入。

在云天励飞的规划中,IFWA并非一套封闭的软件体系,而是通过对主流模型、框架和开发工具的兼容,降低开发者的迁移和使用成本,缩短模型在DeepVerse平台上的部署周期,让国产算力更加便捷地进入实际应用。


“1001计划”,推动Token成本协同优化

降低Token生成成本是一项系统工程。

从芯片架构、IP与EDA,到封装测试、系统互联、软件栈和算力平台,再到模型及应用,产业链不同环节的效率都会影响最终的Token生成成本。实现极致性价比的Token,需要产业链上下游共同参与。

今年5月,云天励飞联合30余家等单位,共同签署“1001计划”倡议。“1001计划”将围绕Token生成效率和成本,推动产业链上下游加强协同。通过更加紧密的产业合作,使模型和应用需求更早反馈至芯片及系统设计环节,推动成熟软件能力加快复用,同时加速芯片在集群和实际场景中的验证和应用。


随着AI走向规模化应用,算力竞争正在进一步转向对系统效率和单位Token成本的持续优化。芯片、软件、系统和应用之间的协同程度,也将越来越直接地影响AI算力的实际价值。

以“百亿Token一分钱”为长期目标,云天励飞将持续推进芯片、系统、软件和产业生态协同创新,与更多生态伙伴共同提高Token性价比,推动国产AI算力从“能用”迈向“好用、易用、用得起”,为人工智能规模化应用提供更加高效、普惠的算力基础。

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
陪睡陪玩只是开胃菜,舔手指塞拳头、集体嫖娼、背后的事藏不住了

陪睡陪玩只是开胃菜,舔手指塞拳头、集体嫖娼、背后的事藏不住了

北海史记
2026-08-12 19:57:54
“空姐给我女儿发破面包”,宝妈坐经济舱吐槽,网友:你不努力的下场

“空姐给我女儿发破面包”,宝妈坐经济舱吐槽,网友:你不努力的下场

番外行
2026-10-03 20:07:32
佛州拆摄像头拆出11台无主设备,县专员:非执法机构装的我不能接受

佛州拆摄像头拆出11台无主设备,县专员:非执法机构装的我不能接受

Ping值焦虑
2026-10-02 23:23:24
父亲是英国黑人,母亲女篮主力,18岁签1.2亿合同,成李梦接班人

父亲是英国黑人,母亲女篮主力,18岁签1.2亿合同,成李梦接班人

白面书誏
2026-09-18 13:32:46
2011年,她全裸接受记者采访,并称:我敢看你们,你们敢看我吗

2011年,她全裸接受记者采访,并称:我敢看你们,你们敢看我吗

皓皓情感说
2026-08-14 08:00:49
蔡天凤案最新庭审:前夫在星巴克练习“从上往下猛击”,前公公用16天备好作案工具

蔡天凤案最新庭审:前夫在星巴克练习“从上往下猛击”,前公公用16天备好作案工具

八卦宝宝
2026-10-02 17:15:29
骗财骗色、被开除军籍,传了二十年的黑料,原来我们全都被骗了

骗财骗色、被开除军籍,传了二十年的黑料,原来我们全都被骗了

史之韵
2026-09-28 18:12:43
60年代美国总统访台,毛主席笑了笑说道:先打7万发炮弹欢迎一下

60年代美国总统访台,毛主席笑了笑说道:先打7万发炮弹欢迎一下

云居历史
2026-09-13 12:43:45
人设崩塌、流量骤减,千万网红辛吉飞宣布失业,要摆摊卖烤冷面

人设崩塌、流量骤减,千万网红辛吉飞宣布失业,要摆摊卖烤冷面

你是我心中最美星空
2026-10-01 15:44:30
出生率暴跌只是假象!真正崩溃的,事实上是中国人千年的生根执念

出生率暴跌只是假象!真正崩溃的,事实上是中国人千年的生根执念

丁丁鲤史纪
2026-10-01 06:58:27
出大事了,莫迪不宣而战,印度在巴基斯坦边界开火,美英法德失声

出大事了,莫迪不宣而战,印度在巴基斯坦边界开火,美英法德失声

凡知
2026-10-04 02:23:55
演员潘粤明画的一幅鬼画,网友:狗链子画的好!

演员潘粤明画的一幅鬼画,网友:狗链子画的好!

乡野小珥
2026-09-21 04:03:10
中网|孙心然:职业赛场并非遥不可及,期待与高芙对决

中网|孙心然:职业赛场并非遥不可及,期待与高芙对决

北青网-北京青年报
2026-10-03 22:30:03
“领导层裂痕加剧”?伊朗强硬派议员遭监禁,曾指控总统发动“政变”

“领导层裂痕加剧”?伊朗强硬派议员遭监禁,曾指控总统发动“政变”

观察者网
2026-10-03 23:22:07
2026中央一号文件:严禁上级机关事业单位从基层借调职工!

2026中央一号文件:严禁上级机关事业单位从基层借调职工!

职场资深秘书
2026-10-03 11:34:51
金价走势已成定局?若无意外,从国庆开始黄金价格或迎来3大转变

金价走势已成定局?若无意外,从国庆开始黄金价格或迎来3大转变

潋滟晴方DAY
2026-10-03 12:02:02
板上钉钉!安东尼奥将出任国奥主帅,更希望他率国家队冲击世界杯

板上钉钉!安东尼奥将出任国奥主帅,更希望他率国家队冲击世界杯

刀锋体育
2026-10-03 18:29:44
一旦确诊就是生命倒计时?建议糖尿病患者:别低估这4种并发症

一旦确诊就是生命倒计时?建议糖尿病患者:别低估这4种并发症

阿兵科普
2026-08-06 09:52:46
一个镜头传三代 华为睿影Z10模块相机靠转接环解决卡口难题

一个镜头传三代 华为睿影Z10模块相机靠转接环解决卡口难题

快科技
2026-10-03 18:57:07
陈云贤:佛山市市长、市委书记

陈云贤:佛山市市长、市委书记

生活魔术专家
2026-10-03 13:49:09
2026-10-04 03:28:49
新浪财经 incentive-icons
新浪财经
新浪财经是一家创建于1999年8月的财经平台
4954038文章数 2280关注度
往期回顾 全部

科技要闻

英伟达盘中创历史新高,市值逼近6万亿美元

头条要闻

刚刚拿到绿卡 中国籍夫妻突发车祸身亡

头条要闻

刚刚拿到绿卡 中国籍夫妻突发车祸身亡

体育要闻

这个讨论了一夏天的问题,马刺有答案了吗

娱乐要闻

马思纯一家爬山祈福!素颜出镜笑容甜

财经要闻

4亿台电视挂墙落灰 为何没人愿意开了?

汽车要闻

方程豹9月热销破4万 首款皮卡鲨鱼将于四季度上市

态度原创

家居
本地
旅游
健康
房产

家居要闻

2026建博会(广州) 公装联探展交流活动

本地新闻

中秋逛白塔寺,体验国医妙荟雅集

旅游要闻

美景添韵味 市集聚烟火 守护保平安

刷酸祛痘,为什么有人翻车?

房产要闻

保利大爆发,冲到榜一!海南楼市前三季度,热销榜出炉!

无障碍浏览 进入关怀版