网易首页 > 网易号 > 正文 申请入驻

对话大晓机器人王飞:机器人要学会“脑海中推演,现实中执行”

0
分享至

来源:市场资讯

(来源:网易智能)

8月18日消息,2026 WRC临近,在一场Workshop上,大晓机器人世界模型负责人王飞围绕开悟世界模型Kairos 3.1,给出了团队对世界模型的理解。

在王飞看来,世界模型的核心并不是生成一段视频,而是让机器人在行动前对未来状态和动作策略进行推演。“给定当前看到了什么,以及接下来准备做什么,去推演未来可能发生什么。”王飞说。

机器人需要做到“脑海中推演,现实中执行”

这也是世界模型与传统大语言模型、VLA等技术路线的差别所在。王飞表示,大语言模型或VLA更多是在预测“next token”,而世界模型要预测的是“next state”,即下一个世界状态。输入当前的视觉观测、文本指令、力触状态以及机械臂、灵巧手的策略轨迹后,模型不仅要生成未来画面,还要给出机器人未来执行的策略。

按照大晓的技术路线,Kairos 3.1将理解、生成和预测放到同一套架构中联合训练。模型先把多模态信息压缩到共享隐空间,再基于这一空间完成环境理解、过程分析、结果评估和未来推演。对于同一张桌面和同一个抽屉,机器人可以在不同指令下推演出不同的未来状态,并从多种策略中选择更合适的一条。

“脑海中推演,现实中执行。”王飞这样概括世界模型控制机器人的过程。以开冰箱为例,模型会先完成任务拆解,再在平行空间中生成3至5条候选轨迹及对应的未来演化结果,通过评估器判断成功率、效率和动作代价,再把更优策略部署到真机。对人形机器人而言,这种能力的意义在于减少盲目试错,避免在真实环境中执行危险、高代价或效率偏低的动作。

王飞特别强调,世界模型的生成能力不能只以画面是否自然来衡量。机器人端着咖啡移动时,水面波纹、物体接触、碰撞后的变化,都应符合真实的运动学和物理规律;盘子悬空、物体突然消失或穿模,即使画面看起来完整,也不能说明模型真正理解了物理世界。

围绕这一目标,大晓将数据分为三层:开放物理世界视频、人类第一视角交互数据,以及机器人真机数据。第一层帮助模型学习自然规律和运动规律,第二层让模型理解人如何与环境交互,第三层则将模型对动作的认知对齐到具体机器人本体和策略。

世界模型最终要接受真实场景的检验

对于行业热议的人类第一视角数据,王飞认为,这类数据有机会成为世界模型的重要来源。他表示,依赖真机数据训练机器人成本较高,也难以快速扩大规模;人类在真实环境中的操作视频,则包含大量机器人的交互知识。大晓计划在今年下半年储备百万级数据规模,后续进一步向千万级推进。“世界模型要出现比较明显的能力涌现,可能不止需要百万小时级数据,甚至可能接近千万小时级。”王飞说。

不过,规模并不是唯一标准。王飞提到,第一视角视频不能只是被直接输入模型,还需要结合手部姿态、Hand Mesh和隐空间表征等信息,提升数据中与操作有关的有效信息密度。未来,三层数据范式不会发生根本变化,但以人为中心的数据占比将继续提高,真机数据则更多承担最终对齐的作用。

模型能否在端侧实时运行,同样关系到世界模型能否真正控制机器人。王飞介绍,Kairos 3.1为8B模型,在NVIDIA Jetson Thor、BF16条件下可实现百毫秒级单次推理延迟。大晓后续还计划将模型轻量化至2B级,用于Thor、Orin及国产芯片等端侧部署。对机器人而言,推理速度直接影响移动、避障和操作的连贯性,也关系到实际场景中的运营节拍和成本。

世界模型最终仍要接受真实场景的检验。大晓机器人研发副总裁刘春晓介绍,团队在WAIC期间发布了“晓满”“晓新”“晓途”三套解决方案,分别面向即时零售、酒店客衣服务和开放场景自主作业。

其中,“晓满”要处理多SKU、窄巷道和高频履约任务;“晓新”需要完成取衣、洗涤、转运、烘干、折叠、送回等长流程服务;“晓途”则面向园区巡检、城市治理和文旅等开放环境。三类场景看似不同,但都要求机器人在连续任务中保持状态理解,并在环境变化或单次失败后重新规划。

“Demo很多时候是在受控环境和有限操作物体里展示单点任务的最优状态,”刘春晓说,真正落地至少要面对场景泛化、持续作业和规模化复制三个问题。以酒店洗衣为例,机器人不能因为一次开门或抓取失败就停在原地,而要知道失败发生在哪里,并据此调整下一步动作。

在刘春晓看来,平行推演和反思能力正是世界模型进入真实业务的关键。执行前,模型要比较不同策略,选择行动代价更小的方案;执行后,如果真实结果与预期不一致,失败信息要及时回到模型中,帮助它更新对环境和任务的判断。“对于大规模真实落地来说,这种持续纠错和恢复能力是必须解决的问题。”刘春晓说。

从预测下一个词,到预测下一个世界状态,世界模型试图把机器人从“按照指令做动作”推向“理解结果后再行动”。这条路仍需要更多数据、更快的端侧推理和更长时间的真实场景验证,但在具身智能从展示走向作业的过程中,机器人能否先推演、再执行、还能反思,正在成为新的技术分界线。(定西)

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
广州知名酒楼渔民新村总店疑似闭店

广州知名酒楼渔民新村总店疑似闭店

新快报新闻
2026-08-20 08:05:09
乌军跨越6000公里炸毁俄军军列,朝鲜弹道导弹就地销毁!

乌军跨越6000公里炸毁俄军军列,朝鲜弹道导弹就地销毁!

知兵
2026-08-18 22:41:31
四川长宁县一升学宴突发事故致5人死亡

四川长宁县一升学宴突发事故致5人死亡

界面新闻
2026-08-19 09:01:56
就在刚刚,国乒亚运名单调整,王励勤不再冷藏败将,用人决策引发争议

就在刚刚,国乒亚运名单调整,王励勤不再冷藏败将,用人决策引发争议

沉睡月亮m
2026-08-20 11:01:08
司法部公告:欧盟调查构成不当域外管辖,“如欧方一意孤行,中方将坚决依法反制”

司法部公告:欧盟调查构成不当域外管辖,“如欧方一意孤行,中方将坚决依法反制”

环球网资讯
2026-08-20 06:53:08
郭德纲改编红歌遭调查 演出延期 言论边界再引争议

郭德纲改编红歌遭调查 演出延期 言论边界再引争议

宅家小欢喜
2026-08-20 08:18:34
中国“最糙动画”电影《牛来》火出国门?到了日本网友嘴里,画风突然变了...

中国“最糙动画”电影《牛来》火出国门?到了日本网友嘴里,画风突然变了...

今日日本
2026-08-19 13:36:00
五方大交易,骑士得到沃特森,但可能吃亏了!哈登也面临艰难抉择

五方大交易,骑士得到沃特森,但可能吃亏了!哈登也面临艰难抉择

老梁体育漫谈
2026-08-20 12:58:36
朱时茂陈佩斯现状曝光差距大,一人家财万贯,一人真被倪萍说中了

朱时茂陈佩斯现状曝光差距大,一人家财万贯,一人真被倪萍说中了

小丸说故事
2026-07-01 14:44:40
今年最惨女明星,从顶流到封杀,只隔了一天

今年最惨女明星,从顶流到封杀,只隔了一天

独立鱼
2026-08-19 23:05:58
郭德纲曾经在《欢乐喜剧人》对沈腾说:“赐名沈云腾”沈腾没接话

郭德纲曾经在《欢乐喜剧人》对沈腾说:“赐名沈云腾”沈腾没接话

西楼知趣杂谈
2026-08-19 21:16:19
比立陶宛还要嚣张!该国邀请赖清德访问,中国68年的友谊喂狗了

比立陶宛还要嚣张!该国邀请赖清德访问,中国68年的友谊喂狗了

色彩斑斓的世界
2026-08-20 05:51:59
这才是瓦格纳兵变失败的原因?普京早留了一手,俄军最大赢家浮现

这才是瓦格纳兵变失败的原因?普京早留了一手,俄军最大赢家浮现

花颜蕴韵
2026-08-18 00:24:36
下一轮失业潮最危险的,不是银行保险业,而是人均年薪15万的岗位

下一轮失业潮最危险的,不是银行保险业,而是人均年薪15万的岗位

秋枫凋零
2026-08-20 02:42:33
猝然去世传闻真相大白刚半个月,44岁王凯近况曝光,刘涛没说错

猝然去世传闻真相大白刚半个月,44岁王凯近况曝光,刘涛没说错

阿斚田侃故事
2026-08-20 07:47:49
北京摇号新规来了!油电双申到底怎么选,填错一步锁定十年?

北京摇号新规来了!油电双申到底怎么选,填错一步锁定十年?

右耳远闻
2026-08-18 17:55:03
一个反华领导人,把自己国家折腾得民穷财尽,临近亡国才想起求中国救命,中国怎么回应的?

一个反华领导人,把自己国家折腾得民穷财尽,临近亡国才想起求中国救命,中国怎么回应的?

人生录
2026-08-15 00:05:14
一脸油腻,表情狰狞,却硬在央视大剧演刑警,网友:真不害臊吗?

一脸油腻,表情狰狞,却硬在央视大剧演刑警,网友:真不害臊吗?

洲洲影视娱评
2026-08-19 13:23:27
深圳地铁客流榜出炉5号线又是第一,一百多万人天天从龙华坂田挤去南山上班

深圳地铁客流榜出炉5号线又是第一,一百多万人天天从龙华坂田挤去南山上班

今日搞笑分享
2026-08-20 10:28:19
“巨大损失”!梅仁毅逝世,出生于广东

“巨大损失”!梅仁毅逝世,出生于广东

南方都市报
2026-08-20 11:21:41
2026-08-20 14:36:49
新浪财经 incentive-icons
新浪财经
新浪财经是一家创建于1999年8月的财经平台
4488076文章数 9325关注度
往期回顾 全部

科技要闻

DeepSeek Harness更新多模态支持

头条要闻

许家印被判无期徒刑 恒大集团、恒大地产等案一审宣判

头条要闻

许家印被判无期徒刑 恒大集团、恒大地产等案一审宣判

体育要闻

拥有“儿皇梦”的罗德里,为何选择巴萨?

娱乐要闻

汪峰也没想到章子怡,挖到了一条财路

财经要闻

许家印被判处无期 恒大集团被罚88.2亿

汽车要闻

城区油耗3L级 长安CS55蓝鲸超擎混动 7.99万起

态度原创

教育
旅游
游戏
家居
数码

教育要闻

2026沿黄九省(区)普通高中学生辩论邀请赛在青岛举办

旅游要闻

广州七夕夜游冲进全国第三!珠江夜游人气高涨

曝索尼《地平线3》预制作卡了5年 主力搞多人衍生作

家居要闻

2026建博会(广州) 公装联探展交流活动

数码要闻

泰坦军团推出QD Mini LED曲面显示器M34E7S:34" UWQHD 240Hz

无障碍浏览 进入关怀版