网易首页 > 网易号 > 正文 申请入驻

WAIC 2026 直击:云天励飞发布未来算力蓝图,三款芯片+超节点直指“百亿Token一分钱”

0
分享至

来源:市场资讯

(来源:雷峰网)

7月18日,云天励飞在2026 WAIC公布未来两年多AI推理芯片路线图。公司计划推出DeepVerse100P、DeepVerse100D、DeepVerse100L三款芯片,分别针对AI推理中Prefill、Decode和Decode FFN环节的负载特征进行专用优化。

三款芯片将面向万卡异构集群进行协同设计与部署,通过对不同推理阶段进行解耦,为不同负载配置更加适配的芯片和算力资源,进一步提升系统整体效率,持续降低Token生成成本。


推理负载持续分化,算力优化走向精细化

从负载特征来看,当前大模型推理应用正在形成不同类型:以对话、知识问答为代表的通用AI助手,以复杂推理、编程为代表的深度推理应用,以及以Agentic Coding、多Agent协同为代表的实时智能体系统。

随着AI应用不断深入,单次任务的上下文长度、推理链路复杂度以及实时交互要求持续提高,对推理系统的吞吐、延迟和成本提出了更高要求。对于大规模推理部署而言,峰值算力已难以单独反映系统效率,计算、访存、互联和系统调度等因素,共同影响Token生成效率和成本。

大模型推理不同阶段的计算特征也存在明显差异。Prefill需要集中处理输入上下文,对计算能力要求较高;Decode采用逐Token生成方式,对内存带宽和数据访问效率更加敏感。随着MoE等模型架构发展,Decode阶段内部的Attention与FFN在计算、访存等方面也呈现出不同的资源需求。

针对推理负载的变化,云天励飞计划在未来推出DeepVerse100P、DeepVerse100D和DeepVerse100L三款云端大算力推理芯片。

DeepVerse100P面向百万级上下文Prefill场景打造。在传统混部架构中,长上下文Prefil与Decode共享算力与带宽资源,会造成资源抢占,对Decode生成吞吐造成影响。

DeepVerse100D面向Decode环节打造专用推理引擎,拥有数倍于主流芯片的内存带宽,支持1024卡Scale-up及光互联系统架构。通过按需建立光路直连,并根据任务动态重构光路,减少传统多跳电交换和静态组网中的排队、拥塞及中间转发开销,降低多节点通信阻塞和尾延迟,提高逐Token输出的稳定性。

DeepVerse100L面向Decode 阶段计算密集型的FFN环节,采用3D Memory架构,相比主流HBM,大幅提升内存带宽,并通过低延迟芯片互联和激活数据快速传输,提高计算与通信的并行效率。


三款芯片协同面向万卡异构集群

随着AI推理进入规模化部署阶段,芯片优化也正由单颗性能提升,进一步走向多芯协同和集群级效率优化。

在万卡规模的推理集群中,系统效率并非单卡性能的简单叠加。不同推理负载对计算、内存和通信资源的需求存在明显差异,当Prefill与Decode、Attention与FFN共享同一套通用算力资源时,容易产生资源竞争。与此同时,随着集群规模扩大,通信阻塞、资源等待和尾延迟等问题也会进一步影响整体推理效率。

因此,提升Token生成效率,除了优化单颗芯片性能,还需要围绕芯片在集群中的协同,对推理过程中的计算、访存、互联和资源配置进行系统级设计。

基于DeepVerse100P、DeepVerse100D和DeepVerse100L,云天励飞计划推动三款芯片在万卡异构集群中的分离式部署与协同运行。按照Prefill、Decode 和Decode FFN的不同负载特征,分别配置相应芯片和资源池,并通过高速互联形成协同运行的异构算力系统。

这一芯片协同方案围绕Token生成全过程进行系统优化。通过对不同推理阶段进行分离,降低不同负载之间的资源干扰,并根据实际需求配置计算、访存和通信资源,从而提升集群资源利用率和整体推理效率。

从面向特定推理负载进行芯片优化,到不同芯片之间的协同,再到万卡级集群应用,云天励飞正在将AI推理芯片的优化范围由单颗性能延伸至集群级效率。

面向“百亿Token一分钱”的长期目标,云天励飞希望以三款芯片为核心,形成一套服务于大规模Token生成的“推理工厂”,通过芯片、互联、软件和系统的协同优化,提高算力产出效率,持续降低单位Token成本。


IFWA软件栈:降低国产算力应用门槛

硬件异构程度和集群规模不断提升,也对软件栈提出了更高要求。模型能否快速完成适配、算子性能能否得到充分释放、不同硬件资源能否高效协同,直接影响DeepVerse芯片在大规模集群中的实际运行效率。

围绕DeepVerse芯片及其集群应用,云天励飞持续建设IFWA软件栈,覆盖AI模型开发、编程及系统等不同层级,为模型适配、算子优化、编译部署和软硬件协同提供软件支撑。

在兼容性方面,IFWA围绕Transformer主流架构,持续完善PyTorch ATen算子的适配和性能优化,并加强对vLLM、SGLang等主流推理框架的支持。通过兼容主流软件接口、复用成熟开源组件,降低模型向DeepVerse平台迁移和部署的成本。

在模型适配和开发效率方面,IFWA构建了覆盖模型量化、压缩、编译和部署的一站式自动化工具链,并引入AI Agent参与推理芯片适配和性能优化。

此前,云天励飞已开源Houmao多Agent异构编程框架,由不同Agent协同完成模型开发、算子开发、性能优化和测试验证等任务,将部分依赖人工经验的芯片软件开发流程转化为自动执行、自动验证和持续优化,缩短新模型和新算子的适配周期。

与此同时,云天励飞还将成熟的Triton算子能力融入FlagOS,通过代码贡献、联合验证和社区复用,推动相关能力在国产AI软件生态中进一步共享,减少不同硬件平台在算子适配上的重复投入。

在云天励飞的规划中,IFWA并非一套封闭的软件体系,而是通过对主流模型、框架和开发工具的兼容,降低开发者的迁移和使用成本,缩短模型在DeepVerse平台上的部署周期,让国产算力更加便捷地进入实际应用。


“1001计划”,推动Token成本协同优化

降低Token生成成本是一项系统工程。

从芯片架构、IP与EDA,到封装测试、系统互联、软件栈和算力平台,再到模型及应用,产业链不同环节的效率都会影响最终的Token生成成本。实现极致性价比的Token,需要产业链上下游共同参与。

今年5月,云天励飞联合30余家等单位,共同签署“1001计划”倡议。“1001计划”将围绕Token生成效率和成本,推动产业链上下游加强协同。通过更加紧密的产业合作,使模型和应用需求更早反馈至芯片及系统设计环节,推动成熟软件能力加快复用,同时加速芯片在集群和实际场景中的验证和应用。


随着AI走向规模化应用,算力竞争正在进一步转向对系统效率和单位Token成本的持续优化。芯片、软件、系统和应用之间的协同程度,也将越来越直接地影响AI算力的实际价值。

以“百亿Token一分钱”为长期目标,云天励飞将持续推进芯片、系统、软件和产业生态协同创新,与更多生态伙伴共同提高Token性价比,推动国产AI算力从“能用”迈向“好用、易用、用得起”,为人工智能规模化应用提供更加高效、普惠的算力基础。

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
终于有经济学家批评体制内退休金太高、加剧代际矛盾,评论区炸锅

终于有经济学家批评体制内退休金太高、加剧代际矛盾,评论区炸锅

慧翔百科
2026-06-23 08:47:02
65岁费翔孤独情绪崩溃,近况曝光与娜然关系真相大白

65岁费翔孤独情绪崩溃,近况曝光与娜然关系真相大白

原梦叁生
2026-07-18 18:46:01
姆巴佩独享世界杯射手王!22球反超梅西,单届轰10球56年首人

姆巴佩独享世界杯射手王!22球反超梅西,单届轰10球56年首人

奥拜尔
2026-07-19 06:36:17
杰富瑞:Kimi K3引爆AI大模型,DeepSeek时刻再度上演

杰富瑞:Kimi K3引爆AI大模型,DeepSeek时刻再度上演

新浪财经
2026-07-19 09:38:57
特朗普已经下定决心,摧毁革命卫队?

特朗普已经下定决心,摧毁革命卫队?

高博新视野
2026-07-17 19:05:06
驿站老板好心帮忙,让朋友15岁儿子干零活,劳动监察部门:违规使用童工罚款5000元

驿站老板好心帮忙,让朋友15岁儿子干零活,劳动监察部门:违规使用童工罚款5000元

新快报新闻
2026-07-18 21:44:18
7月19日竞彩足球推荐分析:世界杯决赛西班牙对战阿根廷赛事前沿分析比分胜平负参考

7月19日竞彩足球推荐分析:世界杯决赛西班牙对战阿根廷赛事前沿分析比分胜平负参考

每日精选二串一推荐
2026-07-19 02:57:28
重庆市委书记:严格执行领导干部到岗带班、24小时专人值班制度,做到突发情况第一时间坐镇指挥、重大险情第一时间现场处置

重庆市委书记:严格执行领导干部到岗带班、24小时专人值班制度,做到突发情况第一时间坐镇指挥、重大险情第一时间现场处置

政知新媒体
2026-07-18 21:35:59
TA:世界杯决赛场馆草皮状况得到显著改善,已接近最佳标准

TA:世界杯决赛场馆草皮状况得到显著改善,已接近最佳标准

懂球帝
2026-07-19 10:41:54
回归“一页纸”,清华大学录取通知书到了

回归“一页纸”,清华大学录取通知书到了

澎湃新闻
2026-07-17 11:58:10
高市早苗白忙一场:25国代表齐聚上海,中国的贵客们都到了!

高市早苗白忙一场:25国代表齐聚上海,中国的贵客们都到了!

遁走的两轮
2026-07-17 17:54:08
油价或将于7月31日24时大幅调整

油价或将于7月31日24时大幅调整

吉刻新闻
2026-07-18 22:58:29
大罗犀利点评C罗:踢沙特联赛或许够格,但世界杯舞台已力不从心

大罗犀利点评C罗:踢沙特联赛或许够格,但世界杯舞台已力不从心

星耀国际足坛
2026-07-18 22:07:33
上海三甲医院副院长直言:别傻等名医号了!看病其实有“捷径”,普通门诊这样搭,才是真正的“内行”操作

上海三甲医院副院长直言:别傻等名医号了!看病其实有“捷径”,普通门诊这样搭,才是真正的“内行”操作

新浪财经
2026-07-18 22:00:51
通报三日过后出现令人心痛的一幕闵先生遭连番质询

通报三日过后出现令人心痛的一幕闵先生遭连番质询

荷兰豆爱健康
2026-07-19 01:51:58
晒被子后有“太阳味”?医生提醒:不是螨虫烤焦了,而是因为这个

晒被子后有“太阳味”?医生提醒:不是螨虫烤焦了,而是因为这个

健康科普365
2026-07-18 21:56:38
郑智才是青岛西海岸最大的短板!

郑智才是青岛西海岸最大的短板!

体育全天候
2026-07-19 10:44:50
8月1日正式生效!网贷、信用卡全面大变天,欠债的人终于有救了

8月1日正式生效!网贷、信用卡全面大变天,欠债的人终于有救了

别人都叫我阿腈
2026-07-19 07:12:13
追了郑钦文三年,今天看完比赛,我第一次有点寒心

追了郑钦文三年,今天看完比赛,我第一次有点寒心

生活新鲜市
2026-07-18 14:37:15
丰田宣布:2027年,将推出第二代混动发动机,油耗低至2.1L

丰田宣布:2027年,将推出第二代混动发动机,油耗低至2.1L

阿芒娱乐说
2026-07-19 00:04:36
2026-07-19 12:04:49
新浪财经 incentive-icons
新浪财经
新浪财经是一家创建于1999年8月的财经平台
4116832文章数 8859关注度
往期回顾 全部

科技要闻

Kimi K3单项登顶 整体落后前沿模型2-3个月

头条要闻

伊朗预警将"全面进攻" 穆杰塔巴:让美国付出沉重代价

头条要闻

伊朗预警将"全面进攻" 穆杰塔巴:让美国付出沉重代价

体育要闻

世界杯决赛,从“澡盆德比”500年前讲起

娱乐要闻

全网都心疼邹市明,再逼他支棱了

财经要闻

任泽平VIP会员自称爆仓巨亏千万

汽车要闻

把中国超跑卖到英国,比亚迪正在被世界看见

态度原创

艺术
房产
手机
健康
军事航空

艺术要闻

国展 | 2026年“悲鸿风度·第三届油画双年展” 入选油画(一)

房产要闻

突然出手!千亩城更+一线江景,世嘉亮出超级四代宅!

手机要闻

谷歌安卓曝身份验证绕过漏洞:Gemini可绕过锁屏发消息

刮痧也会刮出脑梗?讲个真实案例

军事要闻

美军连续七晚空袭伊朗

无障碍浏览 进入关怀版