网易首页 > 网易号 > 正文 申请入驻

MR设备普及是李飞飞世界模型的模拟器底座

0
分享至

最近李飞飞的一篇文章火了,长文介绍了世界模型的构成,以及所需要的部分。


介绍了真正的AI不应该只是文本,李飞飞当之无愧的成为现在世界模型的第一推行梯队。

现在我正在前往WWDC的飞机上,如果你对WWDC直播感兴趣可以点击直播预约

这篇文章是原文地址,我将其翻译为中文了

李飞飞在推崇世界模型之外,但是你去追寻她的所有相关公开发言,从来没有提及过vision Pro,以及MR设备。

而她提及多的就是世界模型与具身智能的关系,对于MR设备产业的上下游她几乎不清楚。

而今天我想提的是空间计算设备,也就是像Apple vision Pro以及AndroidXR、以及PICO swan这些MR设备才是世界模型的底座。

只有他们才能够提供人类现在没有的数据,空间、深度、以及人类互动数据。当MR设备普及、用户使用时长越来越多,空间照片、空间视频越来越多,我们才能够得训练与制作模拟器。

在李飞飞最新的文章提到:渲染器是比较成熟的,比如像现在的ChatGPT image2 、Gemini等这些都是渲染器,而模拟器要的是空间数据、深度数据

而这一切都要来自空间计算,谁能够拥有大量的空间数据,就可以更快的训练、生成世界模型。

现在其他公司采集人类第一数据,数据质量差:因为没有MR设备芯片与操作系统

比如有美国在印度公司开始抓取工人的第一视角数据用来训练机器人,但这些设备由于没有标准的空间技术操作系统,vision OS、AndroidXR,导致采集的数据精度都不够高。


现在Apple vision Pro的数据精度可以达到毫米级,而这些普通的设备由于传感器、摄像头,不管是在算法层面还是在硬件层面,都和空间操作系统相距甚远,所以自然采集的数据都是低质量physics 数据,在vision Pro上的数据质量,可以让机器人完成这个世界的物理操作。

也就是说,MR设备是机器人大模型没有出来的遥控器:至少3年内

像李飞飞说的,现在真实世界数据比互联网少几个数量级,这是非常正确的。

像现在拍摄空间照片、空间视频,很多人都没有看过,真的要看只能在MR设备里。即使是在苹果官方的宣传照片里,也很难让普通感受到3D的空间效果。


空间计算的App也几乎没有互联网的,更何谈数据了

我们在做空间计算开发的时候,就发现能够联网有互联网的空间计算APP在vision OS的AppStore就几乎没有,即使现在苹果官方宣称有几千款APP在vision OS上是native的。

抛开那些visionOS的单机版本、demo能够真正的持续使用的少之又少

MR设备的增长率还要等到2027年,远远没有到来

李飞飞是世界模型的创立者,也是推广者,但是她并不知道MR设备的行业发展是她世界模型的底座,也就是硬件设备底座。

她不清楚人机交互的本质,世界模型如果抛开硬件终端、人机交互,就会成为一个学术命题,而真的要把世界模型用起来,能够训练起来,这就离不开世界模型的运行终端,能够和空间进行交互的,则一定是基于眼镜第一视野的XR设备或者AR设备,这些设备不仅可以感知环境还能够感知空间深度、距离、以及时间。

要想加速世界模型,首先第一件事就是加入MR设备终端的普及,而这一点从现在我们内部知道的是,2026年MR设备从vision Pro开始,再到AndroidXR设备、以及project swan字节跳动等设备,都会大量增加空间视频、空间照片的拍摄数量。

空间视频是一种全新的数据格式,不仅有平面内容还有深度、以及环境mesh网格,这些数据都将成为世界模型模拟器的数据底座。

从现在来看几乎所有的带有空间操作系统的MR设备都可以支持拍摄空间视频与空间照片,比如AndroidXR最新系统版本已经支持将其YouTube变成为3D视频。

空间计算设备,通过空间操作系统将视频转化为空间视频、空间照片能力,是MR设备的标准能力,也是空间操作系统的标准能力。

即使是美国总部,苹果消费者店员也认为他是VR

在苹果总部,vision Pro仍然很多人搞不明白,即使是里面的店员也只会基本操作,当我知道我们团队在做空间计算的互联网,空间互联网的时候都是感叹震惊。

因为他们其实对于下一代计算平台以及vision Pro到底可以发挥多大作用,他们是不知道的,无非就是苹果店里的那几个默认App或教学App。


通过空间计算技术,我最后在苹果visitor center和美国团队的朋友空间聊天以及碰面相关的公司产品介绍。


可以这么说,通过空间计算技术,我们2个即使从没有碰面,也可以很好的进行互动,甚至是有在一起的感觉。

而这一点很遗憾是在苹果体验没有的,因为考虑到用户隐私,现在persona在线下体验店是没有开放的。

只有自己购买设备之后自己录制。

不过最后讽刺的是,在WWDC临近的酒店,中国大妈大叔还是占领了旧金山,与我们这些WWDC的科技从业者形成了鲜明的对比,一个是世界的科技中心当然也少不了中国的退休大妈大叔来旅游。


今天的分享就在这里

找我交流与合作 空间计算与脑机接口系统开发

题图来自 Unsplash ,基于 CC0 协议, 如有侵权,请联系pmtalk123删除

“分享产品经理改变世界的点滴”

产品顾问| 产品咨询|培训合作

请添加微信PMxiaowanzi

最近我的原创

每日案例拆解库,AI等产品打卡群

我创建的产品设计打卡社群,加入后365天,每天体验一款APP。提升产品设计能力,同时有1300份体验报告帮助你找到竞品

在这里你可以随时查询到你想找的各类竞品行业APP,无须自己亲自下载就可以马上得到APP的一手产品优化、交互设计、功能描述信息。

从优化&建议、商业模式、运营、功能描述、交互设计、产品定位至少6个维度,体验一款应用。

平均1天1块钱,扫码购买即可加入

连续体验48款应用,通过后原路退回

报名后添加星球助理

PMTalk123

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
三个人同在一个军,军长是中将,副军长是少将,师长却后来居上

三个人同在一个军,军长是中将,副军长是少将,师长却后来居上

史之铭
2026-06-22 01:08:59
巨亏850亿!曾经的“全球霸主”尼康,只用20年把自己“作死”!

巨亏850亿!曾经的“全球霸主”尼康,只用20年把自己“作死”!

青眼财经
2026-06-11 08:00:20
我在法国被半根面包干趴下那天,才明白中国人对法棍的误会太深了

我在法国被半根面包干趴下那天,才明白中国人对法棍的误会太深了

天下霸奇
2026-06-02 08:34:41
“开家长会怎么办?”另类小情侣被嘲,孩子出生自带“满背”!

“开家长会怎么办?”另类小情侣被嘲,孩子出生自带“满背”!

林林先生
2026-06-21 10:10:03
世界冠军吴鹏近况:39岁发福明显,迎娶美女主持,创业成功不缺钱

世界冠军吴鹏近况:39岁发福明显,迎娶美女主持,创业成功不缺钱

大西体育
2026-06-22 07:01:47
WTT球星赛落幕!日本4冠韩国1金,户上隼辅、早田希娜单打称王

WTT球星赛落幕!日本4冠韩国1金,户上隼辅、早田希娜单打称王

全言作品
2026-06-22 01:55:25
兰州相亲现场:35+女士站成排,男士都绕着走,评论区全是大实话

兰州相亲现场:35+女士站成排,男士都绕着走,评论区全是大实话

谭谈社会
2026-05-24 23:20:37
日本不许中国管制稀土,中国换了新打法,7月1日起,新规将生效

日本不许中国管制稀土,中国换了新打法,7月1日起,新规将生效

流年恰似繁花汐
2026-06-22 05:33:05
大反转!耿同学转发导师杨昀声明:我高考裸分676分,不是湖南人

大反转!耿同学转发导师杨昀声明:我高考裸分676分,不是湖南人

火山詩话
2026-06-22 07:54:11
CBA最新消息!许利民重返北京首钢,李炎哲或离开新疆男篮

CBA最新消息!许利民重返北京首钢,李炎哲或离开新疆男篮

体坛瞎白话
2026-06-22 08:16:55
特朗普持续抨击梅洛尼:美伊停战后,意总理又想“重修旧好”

特朗普持续抨击梅洛尼:美伊停战后,意总理又想“重修旧好”

参考消息
2026-06-21 16:01:10
网友质疑爱奇艺广告“偷时间”:显示广告时长18秒,实际播放21秒

网友质疑爱奇艺广告“偷时间”:显示广告时长18秒,实际播放21秒

识礁Farsight
2026-06-21 10:50:10
阿根廷vs奥地利!小蜘蛛回归,首发换3人,梅西冲世界杯进球纪录

阿根廷vs奥地利!小蜘蛛回归,首发换3人,梅西冲世界杯进球纪录

小火箭爱体育
2026-06-21 18:52:50
某鱼惊现“天价笔”:800元一支的中性笔,藏着多少肮脏暗语?

某鱼惊现“天价笔”:800元一支的中性笔,藏着多少肮脏暗语?

番外行
2026-02-26 19:53:05
意媒:米兰未来不会解散,球队将找寻外籍教练接手

意媒:米兰未来不会解散,球队将找寻外籍教练接手

懂球帝
2026-06-21 23:12:32
一场1-0打乱C组格局!巴西形势不妙,无缘小组头名就要遭遇荷兰!

一场1-0打乱C组格局!巴西形势不妙,无缘小组头名就要遭遇荷兰!

林子说事
2026-06-21 14:28:13
中国男篮VS荷兰!郭士强拒绝输球,杨瀚森确定出战,央视直播

中国男篮VS荷兰!郭士强拒绝输球,杨瀚森确定出战,央视直播

体坛瞎白话
2026-06-22 07:30:39
森保一:比赛目标永远都是先赢球;第三战对瑞典要努力保持不失球

森保一:比赛目标永远都是先赢球;第三战对瑞典要努力保持不失球

懂球帝
2026-06-22 03:14:08
防长遭中国制裁,菲总统亲自出面见普京,不料遭俄罗斯狮子大开口

防长遭中国制裁,菲总统亲自出面见普京,不料遭俄罗斯狮子大开口

闻识
2026-06-21 14:50:28
搞笑图片第1250期:我要住这个站,我非得写个万字书要求改名

搞笑图片第1250期:我要住这个站,我非得写个万字书要求改名

今天的快乐
2026-06-21 22:14:43
2026-06-22 09:04:49
Kevin改变世界的点滴 incentive-icons
Kevin改变世界的点滴
每周一次,产品案例与经验分享
339文章数 22关注度
往期回顾 全部

科技要闻

SpaceX 74天闪电IPO,OpenAI能照搬吗?

头条要闻

涨粉1400多万接"失业通知书" 佛得角门将收不续约通知

头条要闻

涨粉1400多万接"失业通知书" 佛得角门将收不续约通知

体育要闻

18岁斩世界杯首球!亚马尔连创5大纪录

娱乐要闻

原来她就是张颂文老婆

财经要闻

这门“躺赚”的生意,要凉了?

汽车要闻

惊出冷汗!重庆实测奥迪A5L,华为智驾这波操作绝了…

态度原创

教育
时尚
本地
公开课
军事航空

教育要闻

翁虹晒女儿高中毕业,全年级前三,拿全A毕业,最终选择UCLA大学

不得不说,“T恤+九分裤”真的很适合夏天,清爽减龄又高级!

本地新闻

龙腾资江 韵动邵阳

公开课

李玫瑾:为什么性格比能力更重要?

军事要闻

时隔44年试射洲际导弹 现场照片传递三个重磅信息

无障碍浏览 进入关怀版