网易首页 > 网易号 > 正文 申请入驻

以前累到吐血造的3D世界,现在一句话就行了?

0
分享至

昨晚,AI 界又来了一波小连招。

前有 Claude 编程更强的 Opus 4.1,中有谷歌突破性拉满的 Genie 3。奥特曼一看也坐不住了,赶紧上了个 GPT-OSS,是 OpenAI 第一次开源。

然而,Claude 编程咱可能没啥实感,OSS 的开源好像也没啥诚意。毕竟不是满血版 GPT,现在效果好的,能本地部署的大模型有的是,OSS 也没强到哪里去,甚至被嘲还不如国产同参数量的 GLM-4.5-Air。。。

相比起来,谷歌 DeepMind 这个 Genie 3,着实是有些惊艳得吓人了。江江这就带大伙儿看看,Genie 3 是怎么造出一个能玩能动,有 “ 记忆力 ” 的高清 3D 世界的。

作为一个世界模型,它延续了 Genie 1 和 2 的技术和概念,能通过文字提示词,实时生成一个高质量,可用上下左右键交互的物理环境。

话不多说,咱先给大伙儿看看效果。

说实话,下面这个视频,单拿出来说是哪个游戏录屏我都信。视角可以摆动,还能用方向键控制运动,小车速度快不说。甚至会顺着地形颠簸,对物理世界的理解拉满。

再看看水上开船,转向丝滑无比,连灯笼被船头推开的碰撞效果都特别真实。

视觉上能这么清晰顺畅,是因为 Genie 3 的实时帧率达到了每秒 24 帧,分辨率能到 720p,从这些参数上来看,真跟普通视频没啥区别了。

之前搞世界模型、实时生成的玩法咱也见过,不过那体验实在是差得有点多了。经常卡顿不说,场景一致性也做得稀碎,比如眼前本来有个人,转个头就没了( 害怕 )。甚至只是站在那里不动,场景也肉眼可见的在变。。。

来自 Dynamics Lab,试玩链接已放在文末

而 Genie 3,前后一致性好得可怕,保证一分钟前你在墙上刷的蓝色油漆是啥样,一分钟后回头来看还是啥样。

即使用 prompt 随时加东西,也不用担心画面会崩。

DeepMind 还试了试 Genie 3 和他们自己的 SIMA agent 相结合。开局一张图和一条指令,剩下的中间 prompt 全靠 agent 编。

比如给 Genie 3 一个面包房的照片,目标是移动到面包冷却架跟前,agent 就得知道啥是冷却架,还得知道按方向键往前走。

看了这么多例子,Genie 3 对物理的理解和一致性做得这么好,如此迅速流畅,江江一开始还以为它生成的是类似 Unity 那样完整的,遵循物理规律的 3D 场景建模。

然而,实际上它就是一帧一帧拼出来的。在单纯视频生成一致性都很难保证的情况下,Genie 3 是咋做到上蹿下跳还能不崩?这实在很让人好奇。。。

但由于自从 Genie 2 就没有技术报告,咱只能从蛛丝马迹里抠出来点信息,偷窥一下他们是咋施展这个魔法的。

作为 Genie 系列的第三代,Genie 3 和其它模型一样,都是踩着前浪长大的后浪。而说起它的前辈们,其实个个也不普通,都有不少创新闪光点。

比如 Genie 1 最先开创了上上下下左左右右的玩法。根据它的论文来看,为了让生成的内容连续可控,Genie 1 当年就是一个自回归模型,简单来说,每生成下一帧,都要记得回顾一下所有历史。

自回归示意图,来源:自回归视频模型 Magi-1 技术报告

Genie 1 还额外搞了个模块,专门关注空间和时间之间的关系,也就是时空建模。

到了训练阶段,因为大部分互联网视频都没动作标签,根本不知道视频里按了哪个键,会让人跑多远,所以他们选择直接用模型预测下一帧会干啥,逼模型自己学出每个动作的隐含意义,这也就是无监督潜在动作学习。

Genie 1 是生成 2D 场景

可惜,Genie 2 之后就没有技术报告了,从结果上看,它从 2D 进化到了 3D,能保持一致性的时长也达到了最多一分钟。

最后到了 Genie 3 这里,已经能做到长时间、强一致性的实时生成了。从一代的论文来猜,它们背后的一些技术像自回归、时空建模、无监督潜在动作学习等等,很可能是代代相传的。

而从 1 到 3,进步这么大,其实 DeepMind 也只花了一年半。。。未来可期啊。

不过,虽然效果很不错,DeepMind 也很诚实地表示,Genie 3 还是有很多不足的。比如环境里的行动空间还是会受到限制、对提示词要求很高、交互也只能持续几分钟等等。

要是这些问题都能解决,感觉离一键生成 3D 风景游戏啊、在超真实的环境里训练具身智能机器人啊、甚至小扎念念不忘的元宇宙都更近了一步。

总的来说,DeepMind 这波确实搞了个好玩的东西,比起隔壁卷参数、卷性能的大模型可有意思多了。

咱可能感觉不出来一个模型回答问题有没有更精准,但 Genie 3 这个视觉冲击、实时交互玩法可是实实在在的不一样了。

原来搞游戏开发,用各种引擎软件大伙儿累到吐血才能抠出来的游戏场景,现在用世界模型就能迅速做出来同样的效果,这性价比简直拉满。

不过唯一的问题,是 DeepMind 没开放过任何试用版本,希望他们不要在 Demo 里超神,试用里超鬼就好。。。

撰文:莫莫莫甜甜

编辑:江江 & 面线

美编:焕妍

图片、资料来源:

Genie 2、3 官方发布页

https://arxiv.org/pdf/2402.15391

https://arxiv.org/pdf/2505.13211

https://demo.dynamicslab.ai/chaos

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
亚运会重磅奖项奖金出炉,中国选手成热门人选,张展硕基本稳了

亚运会重磅奖项奖金出炉,中国选手成热门人选,张展硕基本稳了

南海浪花
2026-09-30 12:30:27
过分了!林诗栋金牌颁奖,现场球迷疯狂嘲讽,网友建议连夜去德国

过分了!林诗栋金牌颁奖,现场球迷疯狂嘲讽,网友建议连夜去德国

宗介说体育
2026-09-29 13:03:50
跨性别工程主管遭中国岳父母枪杀,他曾由女变男,这家人的纠纷很复杂

跨性别工程主管遭中国岳父母枪杀,他曾由女变男,这家人的纠纷很复杂

西楼知趣杂谈
2026-09-30 07:20:24
阿斯:恩德里克新赛季前8场仅出场4分钟,球员在冬窗可能离队

阿斯:恩德里克新赛季前8场仅出场4分钟,球员在冬窗可能离队

懂球帝
2026-09-30 22:58:11
世界首次500强差距断崖:日本149家,美国151家,中国3家,如今呢

世界首次500强差距断崖:日本149家,美国151家,中国3家,如今呢

福建睿平
2026-08-28 07:25:16
挺着大肚也能飞!身高166体重170门将6次神扑 FIFA147非预赛逼平昔日冠军

挺着大肚也能飞!身高166体重170门将6次神扑 FIFA147非预赛逼平昔日冠军

狍子歪解体坛
2026-09-30 17:46:15
恭喜,全红婵正式上任,亮相新岗位,薪酬曝光,新造型惊艳

恭喜,全红婵正式上任,亮相新岗位,薪酬曝光,新造型惊艳

可读
2026-09-29 22:47:25
离婚9年,傅程鹏程愫高调认爱,给内娱上了一课,终是周励淇输了

离婚9年,傅程鹏程愫高调认爱,给内娱上了一课,终是周励淇输了

眼底星碎
2026-09-29 00:33:20
马斯克这一改口,为何让特朗普都会谢

马斯克这一改口,为何让特朗普都会谢

澎湃新闻
2026-09-30 12:22:23
奥委会这下尴尬了:2036年奥运会,中国上海、成都、广州都没申办

奥委会这下尴尬了:2036年奥运会,中国上海、成都、广州都没申办

轻扬墨雨
2026-08-14 13:21:23
原来他是刘欢的亲家,重庆有头有脸的人物,经济实力雄厚还宠儿媳

原来他是刘欢的亲家,重庆有头有脸的人物,经济实力雄厚还宠儿媳

凡知
2026-09-27 12:23:36
2-0!巴萨飞翼2场2球,贝林厄姆遭遇神扑,英格兰知耻后勇

2-0!巴萨飞翼2场2球,贝林厄姆遭遇神扑,英格兰知耻后勇

我的护球最独特
2026-09-30 04:51:30
演员潘粤明画的一幅鬼画,网友:狗链子画的好!

演员潘粤明画的一幅鬼画,网友:狗链子画的好!

乡野小珥
2026-09-21 04:03:10
45岁母亲雾天开车买菜失踪,10年后女儿打车上班,发现是妈妈的爱车

45岁母亲雾天开车买菜失踪,10年后女儿打车上班,发现是妈妈的爱车

今天说故事
2025-07-02 17:31:55
骑行圈里的熟女穿搭,紧身骑行服巧妙勾勒丰腴曲线,氛围感拉满

骑行圈里的熟女穿搭,紧身骑行服巧妙勾勒丰腴曲线,氛围感拉满

只要高兴就好
2026-09-25 09:08:23
当你接触的男人越多,就会发现:那些情商极高,会哄你,情绪价值拉满的男人,爱最飘,钱最不舍得花,心也最容易变

当你接触的男人越多,就会发现:那些情商极高,会哄你,情绪价值拉满的男人,爱最飘,钱最不舍得花,心也最容易变

犀利强哥
2026-08-12 06:59:52
美股三大股指期货全线转跌

美股三大股指期货全线转跌

每日经济新闻
2026-09-30 19:08:05
李思自述:生父李连杰抛弃妈妈和我,如果可以的话我宁愿没这父亲

李思自述:生父李连杰抛弃妈妈和我,如果可以的话我宁愿没这父亲

瑾瑜聊情感
2025-10-10 13:12:06
浓眉:以我们的人员和天赋 我们应该成为联盟前十的防守球队

浓眉:以我们的人员和天赋 我们应该成为联盟前十的防守球队

北青网-北京青年报
2026-09-30 20:30:03
穆里尼奥气炸!皇马钉子户坑惨全队!拒走一人毁掉整个夏窗

穆里尼奥气炸!皇马钉子户坑惨全队!拒走一人毁掉整个夏窗

澜归序
2026-09-30 08:07:19
2026-10-01 00:52:49
差评XPIN incentive-icons
差评XPIN
用知识和观点Debug the world!
11575文章数 489860关注度
往期回顾 全部

科技要闻

OpenAI凌晨大上新!新助手dots迎战Muse

头条要闻

美国著名演员史泰龙发声:我糟蹋了自己的身体

头条要闻

美国著名演员史泰龙发声:我糟蹋了自己的身体

体育要闻

30天30队·火箭:乌度卡的控制欲

娱乐要闻

胡歌现身游本昌遗体告别仪式

财经要闻

“杭州六小龙”迎来价值重估

汽车要闻

燃油车的最佳平替 长城大狗HEV简单好开更经济

态度原创

旅游
本地
教育
数码
军事航空

旅游要闻

漫游京城 共赏金秋盛景

本地新闻

中秋逛白塔寺,体验国医妙荟雅集

教育要闻

最后一个世界大学排名:THE发布最新榜单,英国大学又站起来了?

数码要闻

阶跃终端STEPX Neo智能体手机已获工信部入网许可

军事要闻

美军最后2500人撤离伊拉克

无障碍浏览 进入关怀版