网易首页 > 网易科技 > 网易科技 > 正文

全球第二!云天励飞以世界动作模型突破复杂具身任务,推进端侧高效推理

0
分享至

(原标题:全球第二!云天励飞以世界动作模型突破复杂具身任务,推进端侧高效推理)

近日,2026年BEHAVIOR挑战赛公布最终成绩。云天励飞技术团队IF1001以61.55%的Q-score(任务目标综合完成度评分)和41.20%的完整任务成功率,在57支参赛队伍中脱颖而出,斩获全球第二名。

面对复杂长任务、多样化场景和连续交互的综合挑战,云天励飞采用WAM(World Action Model,世界动作模型)技术路线,将未来世界状态预测与动作决策相结合,提升机器人完成复杂任务的能力。同时,团队围绕端侧部署开展低比特计算与推理系统优化,推动模型能力向高效、实时的机器人执行能力转化。

图片1.png

01赛事|100项家务任务的“极限考场”

BEHAVIOR-1K是面向真实生活复杂场景的大规模具身智能评测基准,由李飞飞教授与团队继ImageNet之后打造,旨在延续以大规模基准推动领域发展的思路,为机器人在真实环境中完成复杂任务的能力建立共同评测标尺,推动具身智能走向实际应用。

2026年赛事设置100项完整家庭任务,覆盖7个高仿真场景,其中4个为新增场景。机器人需要综合运用环境感知、任务推理、跨房间导航与双臂操作等能力,完成涉及多种物体和状态变化的连续任务。

赛事提供的2万条人工遥操作示范轨迹,平均时长约5.9分钟。这意味着,机器人需要在分钟级执行过程中,持续理解环境、跟踪任务进展并协调多个操作环节。

评价这类能力,需要同时看“任务推进了多少”和“任务是否完整完成”。

其中,Q-score衡量任务结束时满足了多少目标条件,即使任务尚未全部完成,也会根据完成程度给予部分得分;完整任务成功率则衡量有多少次执行满足了任务的全部目标条件。前者反映综合任务进展,后者检验从头到尾完成工作的可靠性。赛事主要依据Q-score进行排名。

历史成绩直观体现了这类任务的难度。2025年冠军方案基于π0.5视觉语言动作模型架构改造,隐藏测试Q-score为25.99%,完整任务成功率为12.40%。

在任务数量由50项扩展至100项、场景覆盖进一步扩大的本届赛事中,云天励飞取得了61.55%的Q-score和41.20%的完整任务成功率,两项指标分别高出上一届冠军约35.56和28.80个百分点,这一表现展现了团队应对复杂长任务的技术实力。

图片2.png

02路线|以世界预测支撑行动

机器人完成复杂任务,需要理解每一个动作将如何改变环境,以及这种变化将如何影响后续步骤。云天励飞采用WAM技术路线,将未来视觉状态与动作联合建模,为机器人提供面向行动后果的预测能力,支撑更具前瞻性的决策。

围绕这一技术路线,团队重点应对三类能力挑战。

1. 复杂长任务:让多个技能连成完整任务

完整家务任务通常包含多个相互依赖的步骤。机器人既要执行当前操作,也要记住此前发生了什么、判断接下来需要满足哪些条件。局部动作的偏差,还可能影响后续整条任务链。

WAM将动作与其引发的世界状态变化联系起来,为跨步骤决策提供依据,使模型能够围绕任务目标协调连续操作。本届评测中,Q-score与完整任务成功率的表现,共同体现了团队方案在任务推进和完整执行两个层面的能力。

2. 场景泛化:在变化的环境中调整行动

同一项任务,在不同房间布局、物体位置和初始状态下,可能需要不同的执行方式。物体遮挡、交互条件变化,也会使示范中的动作序列无法直接复用。

WAM通过建模动作与环境演化之间的关系,为模型根据当前场景调整行为提供支撑。其技术价值在于,让机器人能够结合实际观察判断行动后果,将已有操作经验迁移到更多环境条件下。赛事中的多场景、多实例评测,为检验这种适应能力提供了重要载体。

3. 动态闭环:在执行中识别偏差、修正决策

长任务执行过程中,抓取落空、物体滑动或目标状态变化,都可能使原有计划失效。系统需要及时识别实际结果与预期之间的偏差,重新判断任务状态,调整后续行动。

世界预测与执行反馈的结合,为“观察—预测与决策—行动—重新观察”的闭环提供支撑。机器人由此能够持续利用新的环境信息修正决策,为降低误差累积、增强任务执行韧性创造条件。

03落地|让世界模型在端侧高效运行

WAM在动作生成之外引入世界状态预测,也带来了更高的计算需求。机器人端侧受到算力、内存、功耗和散热条件的共同约束,模型必须在有限资源下兼顾预测质量、响应速度与运行稳定性。

端侧推理的关键,是把芯片的理论计算能力转化为真实任务中的有效算力。

围绕这一目标,云天励飞从模型数值表示与硬件执行机制协同入手,通过低比特计算与精度保持算法,释放硬件的低精度计算潜力,提高单位功耗下的模型处理能力。

进一步,团队引入大模型与智能体驱动的递归自我改进(RSI)机制,围绕底层算子和执行流程开展迭代优化。通过算子融合、并行调度等方式,使数据转换等辅助操作尽可能与核心计算重叠,减少额外开销,将低精度计算优势转化为实际推理收益。

实时性同样是端侧落地的重要要求。机器人需要在规定时间内持续获得有效决策,因此,优化不仅关注平均推理速度,也关注时延波动与长尾等待,提升闭环响应的可预测性。

通过算法、软件与硬件的协同优化,团队推动WAM在有限端侧资源下高效运行,为世界预测与动作决策的实时执行提供计算支撑。

04底座|用真实算法负载定义芯片

云天励飞持续推进算法芯片化:深入理解模型的计算结构、数据流与执行需求,以真实负载牵引芯片架构和软件系统设计,提升实际应用中的性能与能效。

具身智能为这一技术路径提出了新的要求。世界预测需要高效计算,长任务需要持续维护状态,实时交互需要稳定响应,端侧部署则需要严格控制资源与能耗。这些需求共同构成了算法与芯片协同设计的重要依据。

此次参赛,既验证了云天励飞在复杂具身任务上的算法探索,也为理解世界动作模型的计算特征、优化推理系统和研究专用计算架构积累了实践经验。

相关推荐
热点推荐
宋庆龄一辈子没有生养,1981年法医对她的遗体进行解剖检查,这才揭开了她心底最痛苦的隐情

宋庆龄一辈子没有生养,1981年法医对她的遗体进行解剖检查,这才揭开了她心底最痛苦的隐情

扶苏聊历史
2026-11-12 18:31:31
CCTV5直播国安VS海港,比赛时间引热议,张玉宁PK武磊,谁能进决赛

CCTV5直播国安VS海港,比赛时间引热议,张玉宁PK武磊,谁能进决赛

体育大学僧
2026-11-18 10:04:08
刻赤大桥被拦腰截断

刻赤大桥被拦腰截断

YY团长
2026-11-17 20:44:46
西班牙U17主帅:中国队很危险,他们在亚洲取得了很好的成绩

西班牙U17主帅:中国队很危险,他们在亚洲取得了很好的成绩

懂球帝
2026-11-18 13:23:42
李在明携夫人凌晨抵达深圳 走上红毯一路鼓掌

李在明携夫人凌晨抵达深圳 走上红毯一路鼓掌

看看新闻Knews
2026-11-18 02:55:20
湘雅二院“虾滑论文”火了:湖南写成人类,一厘米刻12毫米,还拿了五项基金!

湘雅二院“虾滑论文”火了:湖南写成人类,一厘米刻12毫米,还拿了五项基金!

迷世书童
2026-11-18 00:05:12
“中国要被我们拖垮了!”2024年,韩国上千人拒绝吃从中国进口的中国白菜,本想给我们个“下马威”,结果自己撑不住了

“中国要被我们拖垮了!”2024年,韩国上千人拒绝吃从中国进口的中国白菜,本想给我们个“下马威”,结果自己撑不住了

扶苏聊历史
2026-11-16 17:33:26
新华社消息|外交部:中俄美元首将就事关全球和平的重要问题深入交换意见

新华社消息|外交部:中俄美元首将就事关全球和平的重要问题深入交换意见

新华社
2026-11-18 15:44:19
冷冷冷!网友:上海的3℃那就是冷到骨头了!上海发布大风蓝色预警信号…

冷冷冷!网友:上海的3℃那就是冷到骨头了!上海发布大风蓝色预警信号…

新浪财经
2026-11-18 12:04:32
广东队惨败32分!得分点少+失误多+命中率太低,本场产生3个不争的事实

广东队惨败32分!得分点少+失误多+命中率太低,本场产生3个不争的事实

老吴说体育
2026-11-17 21:35:05
发现一个奇怪的现象:电车没有干掉油车,却干掉了汽车修理厂!

发现一个奇怪的现象:电车没有干掉油车,却干掉了汽车修理厂!

補懂事的孩紙
2026-11-17 01:00:42
湖人9连胜!新援格莱姆斯轰47分创多项神迹:比肩科比+超东契奇

湖人9连胜!新援格莱姆斯轰47分创多项神迹:比肩科比+超东契奇

Emily说个球
2026-11-18 15:08:35
荷兰和深圳都是1800万人口,荷兰上半年GDP4.66万亿,深圳呢?

荷兰和深圳都是1800万人口,荷兰上半年GDP4.66万亿,深圳呢?

贸易夜航
2026-11-02 10:42:25
民主党大胜特朗普后,马上派人来中国交底,想让中国明白一件事?

民主党大胜特朗普后,马上派人来中国交底,想让中国明白一件事?

霁寒飘雪
2026-11-18 09:57:54
提醒:糖尿病不怕咸菜、酱油,更不怕喝酒,真正怕的是你做 5件事

提醒:糖尿病不怕咸菜、酱油,更不怕喝酒,真正怕的是你做 5件事

白宸侃片
2026-11-18 07:35:00
中美俄意见一致,宁可让日本从地球上消失,也坚决不允许它拥核!

中美俄意见一致,宁可让日本从地球上消失,也坚决不允许它拥核!

兵鉴史
2026-07-21 18:43:52
下一个萌神?库里8岁儿子卡农小学比赛表现:5中5砍下10分

下一个萌神?库里8岁儿子卡农小学比赛表现:5中5砍下10分

罗说NBA
2026-11-18 07:39:17
离称霸,字节只差一个聊天软件了!

离称霸,字节只差一个聊天软件了!

城事堂
2026-11-17 14:09:44
卷走53亿逃美,欠银行20亿?又一“大佬”跑路,5000家庭血本无归

卷走53亿逃美,欠银行20亿?又一“大佬”跑路,5000家庭血本无归

阿器谈史
2026-11-18 05:04:17
CBA杯-吉林拒广州23分逆转 加特林28分威尔逊20+11

CBA杯-吉林拒广州23分逆转 加特林28分威尔逊20+11

醉卧浮生
2026-11-18 17:32:25
2026-11-18 20:36:49

科技要闻

离职后首份声明!黄仁勋认错愿回归

头条要闻

游客花1600元买的烤全羊剥不出1两肉 官方通报

头条要闻

游客花1600元买的烤全羊剥不出1两肉 官方通报

体育要闻

“中超卡里乌斯”,成了大连的夺冠英雄

娱乐要闻

主持人张泉灵被曝猛料,公司成老赖

财经要闻

黄仁勋留下的高分成绩单,能延续吗?

汽车要闻

全新红旗H9最有意思的地方,是它开始有自己的豪华逻辑了

态度原创

教育
亲子
家居
艺术
公开课

教育要闻

孩子厌学三个原因打通一点就愿上学

亲子要闻

宝蓝在房间用积木搭了一辆彩色的小车,好看又好玩!

家居要闻

2026建博会(广州) 公装联探展交流活动

艺术要闻

投资55亿!深圳歌剧院施工现场更新,主音乐厅马蹄形已现!

公开课

李玫瑾:为什么性格比能力更重要?

无障碍浏览 进入关怀版
×