网易首页 > 网易号 > 正文 申请入驻

李飞飞把世界模型装进掌机!交出AMD收购后首个结果

0
分享至

来源:市场资讯

(来源:图灵人工智能)


转自量子位,仅用于学术分享,如有侵权留言删除


一水 发自 凹非寺

量子位 | 公众号 QbitAI

被AMD高价收购一个月后,李飞飞World Labs带着新成果火速回归!

资金到位、算力到位,他们反手就把交互门槛狠狠打下来了:

之前只能眼馋的Atlas,这回终于有了一个「上手就能玩」的推理优化版Frameboy。

具体怎么玩?

团队成员Andy Cheng二话不说,直接把这套自回归生成系统,当场塞进了一台物理掌机里。

就。。。挺酷的。

摇杆一掰,视角一推。

云端GPU在15 fps的节奏下,逐帧为你搓出来一个全新世界。

艾瑞巴蒂,我们离无限游戏又近了一步!


掌机当摇控器

真别以为这是拿掌机串流现成的3D建模。

传统游戏引擎哪怕画质再逼真,本质上也是美术在三维软件里一根多边形一根多边形捏出来的场景树。

模型再大,逻辑也是预设好的物理碰撞箱。

但Frameboy不一样。

它底层跑的,是World Labs那个号称掌握像素级相机控制(pixel-perfect camera control)的自回归大模型Atlas。


以前我们玩的世界模型是什么画风?

扔一张图进去,等上几分钟,吐出一段摇摇晃晃的视频,你只能当个观众。

镜头稍微往后拉一点,画面就开始崩了(doge)。

这回Andy Cheng拿掌机实测的交互,换了套玩法:

  • 视角自由漫游:摇杆往左一掰,相机参数传到云端,模型开始推测左侧从未存在过的物理细节,光影和景深即时重组。

  • 单图生成三维场:只给一张普通俯拍图或一句Prompt,Atlas就能以这层像素为基础,当场脑补出整座斯坦福广场、哥特庭院或深山古村。

  • 云端逐帧渲染:画面以最高15 fps从云端GPU串流到屏幕上,延迟控制在了体感能接受的范围内。

说白了,你按下的每一次方向键,都在让模型现场重新计算一次物理细节。

一时间有点感慨。

原本以为世界模型走向实时交互还得再熬上两代,结果他们直接把进度条往前拽了一大截。

怎么优化的

那Atlas那么大一个自回归怪物,到底凭什么能跑出15 fps?

先理清它的「前身」。

去年的轻量化模型RTFM虽然快,但本质上只是在几个已知视点之间做插值——

只能在拍好的几张图之间补画面。

而Atlas是站在海量数据上堆出来的真·大模型,能「无中生有」地从零生成世界(哪怕只给一张图或一句话),还能保持相当强的3D空间一致性。

但大模型的代价就是「性缩力拉满」的推理延迟。

要想让手指和像素产生即时反馈,World Labs在工程架构上玩了一手绝活:

Frameboy运行的并非Atlas的完整原始权重,而是一个经过极端优化的专用变体,在保留极高新视点合成能力的同时,将单帧生成的算力开销压榨到了极限。

不仅如此,他们还顺手把这套实时管线缝合进了自家编辑器Viewfinder里。

开发者可以一边用Atlas按帧堆砌自己的世界,一边直接拉起Frameboy的实时浮层,像打游戏一样开着第一人称视角杀进场景里乱窜。

从算法巨兽到掌中玩物,这中间省下来的显存和Token账本,显然是AMD入主后拿硬件工程底座狠狠洗刷过的痕迹。

而算力成本一旦继续下探,实时交互的门槛自然也会跟着进一步降低。

目前打开Frameboy官网,填一下注册就能体验:

整个交互界面就是一个复古掌机面板,内置了多个现成场景供人随意穿梭漫游。


觉得官方预设的不过瘾,还可以拖入一张自己的实景照片或输入提示词,系统会以此为锚点开始逐帧向外延伸推演。

网友Aarav Kothari就分享了一段实际体验视频:

满分10分,看完你打几分?

[1]https://x.com/theworldlabs/status/2118424455873741028

[2]https://www.worldlabs.ai/blog/atlas-realtime

[3]https://x.com/AndyCheng_JH/status/2118486187551904078

[4]https://x.com/aarav_kothari_x/status/2118467473284678089

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
一个不小心,亏了34%

一个不小心,亏了34%

邓姐姐的美好生活提案
2026-11-17 20:03:15
雷克萨斯新车突然亮相:11月17日,即将上市

雷克萨斯新车突然亮相:11月17日,即将上市

手机讲坛
2026-11-17 01:02:51
中俄美三国会晤,欧洲破防了:俄罗斯没资格上桌,我们才该有一席之地

中俄美三国会晤,欧洲破防了:俄罗斯没资格上桌,我们才该有一席之地

吃瓜小侦探
2026-11-18 09:29:05
森保一最后一战输给巴拉圭,日本队八年成绩单如何看?

森保一最后一战输给巴拉圭,日本队八年成绩单如何看?

球星的故事
2026-11-18 23:48:15
王传福,依旧C位!

王传福,依旧C位!

大佬灼见
2026-11-18 20:57:53
阿尔卡拉斯2-0梅德韦杰夫,年终总决赛两连胜提前小组出线

阿尔卡拉斯2-0梅德韦杰夫,年终总决赛两连胜提前小组出线

懂球帝
2026-11-18 22:43:50
“剿匪”司令坐火车撞见陈赓,抓也不是放也不是,干脆假装睡觉

“剿匪”司令坐火车撞见陈赓,抓也不是放也不是,干脆假装睡觉

扬平说史
2026-11-18 21:06:40
前香港电影“御用警察”移民加拿大近况曝光,转行做教车师傅,大谈幕后秘闻

前香港电影“御用警察”移民加拿大近况曝光,转行做教车师傅,大谈幕后秘闻

粤睇先生
2026-11-17 23:28:12
AI开始收费,租号灰产崛起:一月流水30万

AI开始收费,租号灰产崛起:一月流水30万

钛媒体APP
2026-11-06 17:45:48
3800万人围观!黄仁勋辞职后首次发文:英伟达是一生心血,想带大家再冲一次

3800万人围观!黄仁勋辞职后首次发文:英伟达是一生心血,想带大家再冲一次

算法与数学之美
2026-11-18 23:56:49
《谷雨》他浓眉大眼长相周正,帅气不输井柏然,还演过《人世间》差点没认出

《谷雨》他浓眉大眼长相周正,帅气不输井柏然,还演过《人世间》差点没认出

娱君坠星河
2026-11-17 16:04:53
1.5亿!江海大道沿线这个烂尾项目,会有转机吗?

1.5亿!江海大道沿线这个烂尾项目,会有转机吗?

南通楼市说说
2026-11-18 15:41:33
荣耀新机官宣:4K超清实况+9K级大电池,11月23日发布

荣耀新机官宣:4K超清实况+9K级大电池,11月23日发布

T科技衍生
2026-11-19 00:22:54
他就是马斯克的父亲,与继女生下两个孩子,80岁现身上海悠闲搓麻

他就是马斯克的父亲,与继女生下两个孩子,80岁现身上海悠闲搓麻

落雪听梅a
2026-11-17 00:26:43
宗馥莉再掀人事风暴:173名管理人员被免职

宗馥莉再掀人事风暴:173名管理人员被免职

界面新闻
2026-11-18 16:47:07
传腾讯内部空前危机感:AI也会被替代!

传腾讯内部空前危机感:AI也会被替代!

城事堂
2026-11-17 00:05:10
普京就是高!以攻为攻,结束俄乌冲突,芬兰要退出北约

普京就是高!以攻为攻,结束俄乌冲突,芬兰要退出北约

叶葉夜
2026-11-16 19:17:58
1995年的白宫,22岁实习生莱温斯基撩开外衣露出丁字裤,这个举动耗费她20年来承受的后果

1995年的白宫,22岁实习生莱温斯基撩开外衣露出丁字裤,这个举动耗费她20年来承受的后果

磊子讲史
2026-10-20 17:48:37
登顶Top.1,这部9.1分新剧终于爆了

登顶Top.1,这部9.1分新剧终于爆了

来看美剧
2026-11-18 00:00:06
当年尺度最大的5部剧,最后一部仅播5集就被强制禁播了

当年尺度最大的5部剧,最后一部仅播5集就被强制禁播了

小Q侃电影
2026-11-17 23:20:53
2026-11-19 01:36:49
新浪财经 incentive-icons
新浪财经
新浪财经是一家创建于1999年8月的财经平台
5535666文章数 10031关注度
往期回顾 全部

游戏要闻

不是哥们,什么叫二游圈子也流行矮人笑话?

头条要闻

中国女子在希腊失踪半年 保险箱发现10万欧元现金

头条要闻

中国女子在希腊失踪半年 保险箱发现10万欧元现金

体育要闻

伪强队?拥4亿豪阵欧国联6连败+世界杯出局

娱乐要闻

陈晓楠对话厉娜和许飞引全网热议

财经要闻

10万人逼宫英伟达,黄仁勋要复职了?

科技要闻

老黄想回来?英伟达董事会:没门

汽车要闻

全新红旗H9最有意思的地方,是它开始有自己的豪华逻辑了

态度原创

家居
教育
房产
数码
公开课

家居要闻

2026建博会(广州) 公装联探展交流活动

教育要闻

济南市历下区燕山小学教育集团将出席2026第四届课博会,解码“做中学”视域下小学科学教育生态构建

房产要闻

6.6亿!海口卖地!

数码要闻

苹果公布2026古典乐年度专辑:任奫灿《哥德堡变奏曲》获奖

公开课

李玫瑾:为什么性格比能力更重要?

无障碍浏览 进入关怀版