网易首页 > 网易号 > 正文 申请入驻

智源研究院院长王仲远:世界模型——面向真实物理世界的下一代基座模型

0
分享至


©潮涌AI编辑部

AI的下一波浪潮,无疑就是物理AI和世界模型。

但在热潮之下,整条赛道同样暗藏多重待解的行业困局,有关技术路线、训练数据、算力成本、虚实迁移适配度、商业化落地周期等痛点,仍需多方齐力攻破。

7月3日,北京智源人工智能研究院院长王仲远在“2026全球数字经济大会人工智能融合应用发展论坛”上发表了《世界模型:面向真实物理世界的下一代基座模型》主题演讲,直接分享了关于智源研究院在世界模型方向的一些思考,以及最新的研究进展。

以下是王仲远演讲实录,经潮涌AI整理发布:

世界模型不是新概念,

但现在是关键节点

世界模型这个概念,其实并不是全新的。

早在1943年,心智模型就被广泛认为是世界模型最早期的理论源头。

到了上世纪90年代,随着强化学习的兴起,世界模型被引入到计算机科学领域。这几年,大语言模型的能力遇到了一些极限,也让世界模型又一次被广泛提及和讨论。

智源研究院是国内最早提出并且开展世界模型研究的科研机构。早在2024年的智源大会,智源就提出了世界模型是通往物理世界的一个关键路径。

去年智源大会,智源正式发布了“悟界”系列大模型,旨在解决人工智能从数字世界迈向物理世界的关键能力,构建面向物理世界的基座模型。

悟界·Emu:多模态世界基座模型

2024年10月,智源发布了悟界·Emu3,去年10月底发布了悟界·Emu3.5,这是多模态的世界基座模型。

悟界·Emu通过一个非常极简的范式,实现了文字、视频、图像的统一学习,同时实现了多模态理解任务和多模态生成的统一学习。这个原创成果在今年1月份登上了Nature的正刊,创造了国产多模态大模型的众多纪录。


和传统的大语言模型不同,视频是真实世界最有效的载体。

视频里面包含时间、空间、物理、因果关系和意图等多种要素,而且是能够海量获取的数据载体。

对比上一代模型,悟界·Emu3.5的视频训练总时长有了50余倍的提升,并且采用了自回归的架构,能够大规模复用现有的计算基础设施。

随着悟界·Emu3.5的成功训练,我们相信找到了多模态的范式。在训练的过程中,智源也感受到人工智能正在经历一场深刻的范式变革——

下一个物理状态的预测,这就是世界模型的核心本质。

四类世界模型技术路线,

都不一定是真正的基座模型

过去一年,世界模型可以说是异常火热。

智源梳理了一下现有跟世界模型相关的技术路线,大致分为四类:

第一类是以语言为中心的世界模型,包括VLM、VLA,模型在文本空间中预测下一个词,学到的是语言描述的世界,并不能理解背后的物理后果;

第二类是以像素为中心的世界模型,像Sora和Seedance等视频生成类模型,在视觉空间中学习视频或图像,学到的是像素描述的世界;

第三类是以三维结构为中心的世界模型,包括3D重建以及李飞飞团队的World Labs Marble模型,不过模型重建3D空间不等于理解世界,几何结构也不代表物理状态;

第四类是以视觉表征为中心的世界模型,比如杨立昆的JEPA系列模型,预测的是视觉表征的压缩,但视觉嵌入演化不等于物理规律演化。


智源认为,这四类都不一定是真正意义上的世界基座模型。

作为下一代的基座模型,必须是全模态,并且以下一个物理状态预测为核心,能够真正感知、理解真实物理世界的时间、空间、物理规律和物理常识,并且具备交互的能力。

可以说,完全符合这些条件的世界基座模型,目前还没有诞生。

因此,我们认为,世界模型仍处于研究的早期阶段,还需要开展大量的科研探索工作。

悟界·Physis:隐空间建模的新思路

智源提出了以隐空间进行建模的新思路,这就是悟界·Physis。

通过隐空间建模,能够真正实现全模态输入和下一个物理状态的预测,从而真正实现物理正确和通用泛化的能力。

悟界·Physis已经初步具备了世界模型的关键特性,但我要强调,这仍然处于研究的早期阶段。

对比视频生成类的世界模型,悟界·Physis具备更好的对真实物理状态的理解和展示,同时具备物理正确性、动作因果可溯、长程一致、通用泛化的能力。

当物体已经离开当前的画面,依然能够在隐空间中持续存在、运动并且交互。

这对于各种下游任务,比如具身智能、严肃工业、物理仿真、科学预测等场景,都非常重要。



具身智能的四大难题,

智源从数据和模型入手

具身智能领域,当前依然面临着四大挑战:硬件不成熟、数据短缺、模型能力弱、落地应用难。

智源从数据和模型入手,为行业提供一套开源的解决方案。

过去一年里,智源构建了全栈具身智能的技术体系,并实现了数据采集和标准化。智源先后向行业开源了悟界·RoboBrain和悟界·RoboOS模型,并且已经在很多具体场景应用。

随着落地应用的深入,智源发现以VLM和VLA构建的一类世界模型,还有非常强的局限性,泛化和推演能力依然显著不足。

因此,我们认为,下一代的世界基座模型,很有可能是具身大脑有所突破的一个关键路径。

悟界·RoboBrain Orca :具身大脑的突破

智源正在构建的悟界·RoboBrain Orca ,是以“下一个物理状态预测”为核心的具身大脑模型。

对比世界基座模型,智源融合了更多Ego-Centric交互数据,使它能够强化世界模型的具身表征,来提升少样本以及跨场景泛化的能力。

悟界·RoboBrain Orca 能够对多种结果进行预测,来加强具身大脑的关键决策路径。目前,悟界·RoboBrain Orca 已经在多个真机部署上展现了非常强悍的能力。

下一步,智源计划进一步提升悟界·RoboBrain Orca 的参数量和训练数据,来提升其作为具身大脑关键突破的潜力。


当下,智源研究院已经跟行业内超过50余家的机构开展了合作。

智源热切地期待和行业里更多的机构,共同推动世界模型以及具身智能技术和产业的发展。

“2026全球数字经济大会人工智能融合应用发展论坛”由全球数字经济大会组委会主办,北京市经济和信息化局、朝阳区人民政府承办,中关村科技园区朝阳园管理委员会(北京市朝阳区科学技术和信息化局)、北京数智云科信息科技有限公司、北京信息化协会、北京人工智能产业联盟、北京数智聚联企业管理有限责任公司协办。



联系我们 CONTACT US!

请添加微信xingminghui15

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
19岁,8球6助,180万身价!深圳走出的天才,把球踢向了深圳球迷

19岁,8球6助,180万身价!深圳走出的天才,把球踢向了深圳球迷

曹老师评球
2026-08-24 08:45:16
毫无良心良知!河南上演全盘否定,连夜清零的闹剧

毫无良心良知!河南上演全盘否定,连夜清零的闹剧

史海流年号
2026-08-24 14:47:20
公安局长期在招辅警!不是因为没人干,而是因为没人干一辈子

公安局长期在招辅警!不是因为没人干,而是因为没人干一辈子

黑翼天使
2026-08-24 04:21:45
医生劝告:一旦吃上降压药,这4种食物必须戒掉,再吃有中风风险

医生劝告:一旦吃上降压药,这4种食物必须戒掉,再吃有中风风险

垚垚分享健康
2026-08-24 18:00:03
幼儿园小朋友传消息能有多离谱?网友:论胡说八道,他们是祖宗级别

幼儿园小朋友传消息能有多离谱?网友:论胡说八道,他们是祖宗级别

带你感受人间冷暖
2026-08-19 00:05:25
儿子花5.9万元为母亲购买“白发转黑”套餐,反映“没有效果”后,店家剃光老人头发,并拔掉新长出的白发,称是为了“让毛囊吸收精华”

儿子花5.9万元为母亲购买“白发转黑”套餐,反映“没有效果”后,店家剃光老人头发,并拔掉新长出的白发,称是为了“让毛囊吸收精华”

鲁中晨报
2026-08-24 10:34:13
“简拉维”登陆了!浙江局地已现大风和强降雨;超强台风“沙德尔”逼近,现位于距温州东南方向约1549公里洋面,最新登陆地点研判

“简拉维”登陆了!浙江局地已现大风和强降雨;超强台风“沙德尔”逼近,现位于距温州东南方向约1549公里洋面,最新登陆地点研判

都市快报橙柿互动
2026-08-24 13:27:44
4-5惜败!就在刚刚,斯诺克爆大冷:世界排名120掀翻世家第4!新科世锦赛冠军一轮游回家,中国9人晋级32强,赵心童成唯一曙光

4-5惜败!就在刚刚,斯诺克爆大冷:世界排名120掀翻世家第4!新科世锦赛冠军一轮游回家,中国9人晋级32强,赵心童成唯一曙光

小七说篮球
2026-08-24 20:20:44
一艘7万吨级货轮在印度洋沉没多人失联,船上24名船员中有20名中国籍船员,已有2人获救;福建海事局派船参与搜救

一艘7万吨级货轮在印度洋沉没多人失联,船上24名船员中有20名中国籍船员,已有2人获救;福建海事局派船参与搜救

扬子晚报
2026-08-24 20:54:51
远超彭宇案,湖南店主扶人被讹10万,法律博主怒了:击穿道德底线

远超彭宇案,湖南店主扶人被讹10万,法律博主怒了:击穿道德底线

蜜桔娱乐
2026-08-23 16:44:22
4000亿果链巨头公布上半年业绩,预告三季报

4000亿果链巨头公布上半年业绩,预告三季报

21世纪经济报道
2026-08-24 23:48:35
2000万+再赔一年!魏莹陪睡内幕炸裂,父亲亲口承认每月赴约

2000万+再赔一年!魏莹陪睡内幕炸裂,父亲亲口承认每月赴约

南宗历史
2026-08-24 07:06:28
有结论了!领导发声了!胡金秋去向有结论,600万顶薪,妻子意见关键

有结论了!领导发声了!胡金秋去向有结论,600万顶薪,妻子意见关键

晒晒太阳z
2026-08-24 15:40:10
宇树IPO:追高、被套,多久能回血?

宇树IPO:追高、被套,多久能回血?

36氪财经
2026-08-24 15:24:18
三十多年才开第一场演唱会,古天乐凭什么让半个港圈到场?

三十多年才开第一场演唱会,古天乐凭什么让半个港圈到场?

东方不败然多多
2026-08-23 10:37:41
凯特威廉回应哈里梅根:来去自便,0人在意

凯特威廉回应哈里梅根:来去自便,0人在意

悦居英国
2026-08-24 18:56:04
一张毕业照一场直播!同班同学出手,戳穿唐时达(潘涛)的谎言?

一张毕业照一场直播!同班同学出手,戳穿唐时达(潘涛)的谎言?

华庭讲美食
2026-08-23 11:47:35
北京演唱会这天,人情冷暖、江湖地位,在那英身上展现得淋漓尽致

北京演唱会这天,人情冷暖、江湖地位,在那英身上展现得淋漓尽致

草莓解说体育
2026-08-24 05:45:23
查尔斯国王懒理会哈里返英国,带着威廉一家去教堂,路易变乖巧了

查尔斯国王懒理会哈里返英国,带着威廉一家去教堂,路易变乖巧了

八八尚语
2026-08-24 16:07:18
我坚持1年,每天吃2个鸡蛋,头发带来的变化,让我十分意外

我坚持1年,每天吃2个鸡蛋,头发带来的变化,让我十分意外

坠入二次元的海洋
2026-08-24 12:57:04
2026-08-25 00:20:49
潮涌AI incentive-icons
潮涌AI
建构AI产业的先进性。
92文章数 1关注度
往期回顾 全部

科技要闻

宇树科技,3天跌了1000亿

头条要闻

一家自驾3500公里送娃报到 "送子求学"淋成"逆子求学"

头条要闻

一家自驾3500公里送娃报到 "送子求学"淋成"逆子求学"

体育要闻

42张照片 珍藏世界杯的热辣滚烫

娱乐要闻

韩沛颖开撕《主角》剧组引发全网热议

财经要闻

宇树IPO:追高、被套,多久能回血?

汽车要闻

智能超混 国民家轿 上汽大众ID. ERA 5S上市 限时8.99万元起

态度原创

旅游
手机
艺术
公开课
军事航空

旅游要闻

现在去延庆旅游,到底有多好玩?

手机要闻

华为nova17顶配改名Pro Max:2亿像素红枫影像下放,中端市场要迎来新冲击!

艺术要闻

罗尔纯 一幅差点没参展的《九月》,230万!

公开课

李玫瑾:为什么性格比能力更重要?

军事要闻

美国与以色列发生“罕见冲突”

无障碍浏览 进入关怀版