网易首页 > 网易科技 > 网易科技 > 正文

对话大晓机器人王飞:机器人要学会“脑海中推演,现实中执行”

0
分享至

8月18日消息,2026 WRC临近,在一场Workshop上,大晓机器人世界模型负责人王飞围绕开悟世界模型Kairos 3.1,给出了团队对世界模型的理解。

在王飞看来,世界模型的核心并不是生成一段视频,而是让机器人在行动前对未来状态和动作策略进行推演。“给定当前看到了什么,以及接下来准备做什么,去推演未来可能发生什么。”王飞说。

机器人需要做到“脑海中推演,现实中执行”

这也是世界模型与传统大语言模型、VLA等技术路线的差别所在。王飞表示,大语言模型或VLA更多是在预测“next token”,而世界模型要预测的是“next state”,即下一个世界状态。输入当前的视觉观测、文本指令、力触状态以及机械臂、灵巧手的策略轨迹后,模型不仅要生成未来画面,还要给出机器人未来执行的策略。

按照大晓的技术路线,Kairos 3.1将理解、生成和预测放到同一套架构中联合训练。模型先把多模态信息压缩到共享隐空间,再基于这一空间完成环境理解、过程分析、结果评估和未来推演。对于同一张桌面和同一个抽屉,机器人可以在不同指令下推演出不同的未来状态,并从多种策略中选择更合适的一条。

“脑海中推演,现实中执行。”王飞这样概括世界模型控制机器人的过程。以开冰箱为例,模型会先完成任务拆解,再在平行空间中生成3至5条候选轨迹及对应的未来演化结果,通过评估器判断成功率、效率和动作代价,再把更优策略部署到真机。对人形机器人而言,这种能力的意义在于减少盲目试错,避免在真实环境中执行危险、高代价或效率偏低的动作。

王飞特别强调,世界模型的生成能力不能只以画面是否自然来衡量。机器人端着咖啡移动时,水面波纹、物体接触、碰撞后的变化,都应符合真实的运动学和物理规律;盘子悬空、物体突然消失或穿模,即使画面看起来完整,也不能说明模型真正理解了物理世界。

围绕这一目标,大晓将数据分为三层:开放物理世界视频、人类第一视角交互数据,以及机器人真机数据。第一层帮助模型学习自然规律和运动规律,第二层让模型理解人如何与环境交互,第三层则将模型对动作的认知对齐到具体机器人本体和策略。

世界模型最终要接受真实场景的检验

对于行业热议的人类第一视角数据,王飞认为,这类数据有机会成为世界模型的重要来源。他表示,依赖真机数据训练机器人成本较高,也难以快速扩大规模;人类在真实环境中的操作视频,则包含大量机器人的交互知识。大晓计划在今年下半年储备百万级数据规模,后续进一步向千万级推进。“世界模型要出现比较明显的能力涌现,可能不止需要百万小时级数据,甚至可能接近千万小时级。”王飞说。

不过,规模并不是唯一标准。王飞提到,第一视角视频不能只是被直接输入模型,还需要结合手部姿态、Hand Mesh和隐空间表征等信息,提升数据中与操作有关的有效信息密度。未来,三层数据范式不会发生根本变化,但以人为中心的数据占比将继续提高,真机数据则更多承担最终对齐的作用。

模型能否在端侧实时运行,同样关系到世界模型能否真正控制机器人。王飞介绍,Kairos 3.1为8B模型,在NVIDIA Jetson Thor、BF16条件下可实现百毫秒级单次推理延迟。大晓后续还计划将模型轻量化至2B级,用于Thor、Orin及国产芯片等端侧部署。对机器人而言,推理速度直接影响移动、避障和操作的连贯性,也关系到实际场景中的运营节拍和成本。

世界模型最终仍要接受真实场景的检验。大晓机器人研发副总裁刘春晓介绍,团队在WAIC期间发布了“晓满”“晓新”“晓途”三套解决方案,分别面向即时零售、酒店客衣服务和开放场景自主作业。

其中,“晓满”要处理多SKU、窄巷道和高频履约任务;“晓新”需要完成取衣、洗涤、转运、烘干、折叠、送回等长流程服务;“晓途”则面向园区巡检、城市治理和文旅等开放环境。三类场景看似不同,但都要求机器人在连续任务中保持状态理解,并在环境变化或单次失败后重新规划。

“Demo很多时候是在受控环境和有限操作物体里展示单点任务的最优状态,”刘春晓说,真正落地至少要面对场景泛化、持续作业和规模化复制三个问题。以酒店洗衣为例,机器人不能因为一次开门或抓取失败就停在原地,而要知道失败发生在哪里,并据此调整下一步动作。

在刘春晓看来,平行推演和反思能力正是世界模型进入真实业务的关键。执行前,模型要比较不同策略,选择行动代价更小的方案;执行后,如果真实结果与预期不一致,失败信息要及时回到模型中,帮助它更新对环境和任务的判断。“对于大规模真实落地来说,这种持续纠错和恢复能力是必须解决的问题。”刘春晓说。

从预测下一个词,到预测下一个世界状态,世界模型试图把机器人从“按照指令做动作”推向“理解结果后再行动”。这条路仍需要更多数据、更快的端侧推理和更长时间的真实场景验证,但在具身智能从展示走向作业的过程中,机器人能否先推演、再执行、还能反思,正在成为新的技术分界线。(定西)

相关推荐
热点推荐
几千块真的可以难倒英雄汉!东莞父亲掏不出女儿高中9300元学费急哭,兜里仅剩3000元

几千块真的可以难倒英雄汉!东莞父亲掏不出女儿高中9300元学费急哭,兜里仅剩3000元

捣蛋窝
2026-09-01 17:05:01
交通运输部:10月5日,36个高速公路路段易发拥堵

交通运输部:10月5日,36个高速公路路段易发拥堵

界面新闻
2026-10-04 20:23:40
11.78万 !丰田新车正式上市

11.78万 !丰田新车正式上市

科技堡垒
2026-10-04 11:10:43
葡萄牙足协紧急安排会谈,C罗在马德里沉默不语,会见面吗?

葡萄牙足协紧急安排会谈,C罗在马德里沉默不语,会见面吗?

绿茵八卦君
2026-10-05 09:38:57
林志玲最新视频认不出,眼窝凹陷,面相苦,网友辣评:医美后遗症来了

林志玲最新视频认不出,眼窝凹陷,面相苦,网友辣评:医美后遗症来了

全球风情大揭秘
2026-10-02 00:55:40
潘石屹再次预测楼市走向,150万的房子,5年后还值多少?他说的透透的

潘石屹再次预测楼市走向,150万的房子,5年后还值多少?他说的透透的

巢客HOME
2026-08-11 06:25:10
李昊下家出炉!王钰栋开始留洋,安东尼奥将顶替邵佳一

李昊下家出炉!王钰栋开始留洋,安东尼奥将顶替邵佳一

安海客
2026-10-04 10:56:32
日媒提出大胆方案,中俄要是不同意,93年前的一幕将再次上演?

日媒提出大胆方案,中俄要是不同意,93年前的一幕将再次上演?

万物知识圈
2026-10-04 16:29:21
终于有经济学家批评体制内退休金太高、加剧代际矛盾,评论区炸锅

终于有经济学家批评体制内退休金太高、加剧代际矛盾,评论区炸锅

慧翔百科
2026-06-23 08:47:02
19岁松岛辉空首登男单世界第一!刷爆6大纪录 世界前三无中国选手

19岁松岛辉空首登男单世界第一!刷爆6大纪录 世界前三无中国选手

念洲
2026-10-05 07:17:03
卡拉格:德保罗不配和莱万争辩,两人的历史地位根本不是一个级别

卡拉格:德保罗不配和莱万争辩,两人的历史地位根本不是一个级别

体育闲话说
2026-09-11 07:13:42
澳门赌输10亿水落石出,黄晓明不再隐瞒,原来背叛婚姻的不是杨颖

澳门赌输10亿水落石出,黄晓明不再隐瞒,原来背叛婚姻的不是杨颖

一念痴狂
2026-10-01 14:01:24
为什么甲状腺癌越来越多?

为什么甲状腺癌越来越多?

梅斯医学
2026-10-04 07:53:51
解晓东北京朝阳区644平豪宅3850万法拍,全部用于偿还债务

解晓东北京朝阳区644平豪宅3850万法拍,全部用于偿还债务

坠入二次元的海洋
2026-10-04 14:05:36
70亿蓝图!成都闹市中的烂尾别墅群,荒了10年,草比人还高

70亿蓝图!成都闹市中的烂尾别墅群,荒了10年,草比人还高

GA环球建筑
2026-10-04 11:37:57
美国战略:不当世界警察,为了中国,特朗普宁可天下大乱

美国战略:不当世界警察,为了中国,特朗普宁可天下大乱

飘逸的云朵
2026-09-25 07:55:54
刘小涛率团访问阿联酋

刘小涛率团访问阿联酋

新京报
2026-10-04 22:28:21
最容易让人暴涨体重的八种食物,很多人天天吃!

最容易让人暴涨体重的八种食物,很多人天天吃!

王二哥老搞笑
2026-10-05 01:43:51
如果中国人的低工资是一种优势,那谁最希望我们永远低工资?

如果中国人的低工资是一种优势,那谁最希望我们永远低工资?

熊倌儿
2026-09-19 10:48:32
乌克兰女孩嫁中国5年,带俩娃回国探亲,岳父问:我中国女婿呢?

乌克兰女孩嫁中国5年,带俩娃回国探亲,岳父问:我中国女婿呢?

黑哥讲现代史
2026-10-05 00:51:59
2026-10-05 10:27:00

科技要闻

DeepSeek Harness国庆假期上新!

头条要闻

名校"7人轮奸案"震惊全美 女方曾称同意与2人发生关系

头条要闻

名校"7人轮奸案"震惊全美 女方曾称同意与2人发生关系

体育要闻

32胜0负!德约2-1逆转头号种子兹维列夫 第7次晋级中网四强

娱乐要闻

高晓松悄悄复出:官媒没给他留体面

财经要闻

零跑声明切割!蔡康永两面人身份被抵制

汽车要闻

方程豹9月热销破4万 首款皮卡鲨鱼将于四季度上市

态度原创

艺术
教育
房产
时尚
本地

艺术要闻

震惊!吴冠中为何把自己的画展叫“叛徒画展”?真相远比你想的扎心!

教育要闻

班主任22条实用管理方法(建议收藏)

房产要闻

保利大爆发,冲到榜一!海南楼市前三季度,热销榜出炉!

十一长假,中产挤爆“旅游兴趣班”

本地新闻

中秋逛白塔寺,体验国医妙荟雅集

无障碍浏览 进入关怀版
×