网易首页 > 网易号 > 正文 申请入驻

Google发布Genie 4世界模型:新增音频、更真实世界与实时操控

0
分享至

来源:环球市场播报

Google DeepMind周二以研究预览形式发布了其最新世界模型Genie 4。该最新模型生成了迄今最逼真、最具互动性的世界,允许用户在模拟过程中输入提示来改变场景。该模型还能生成与模拟世界匹配的实时音频,包括音乐、环境噪音和互动对话。

Genie 4发布前几个月,AI视频初创公司Runway刚发布了其第二款世界模型GWM Worlds 2——一款可玩、能动态响应用户输入并包含音频生成的模型。与此同时,世界模型行业正开始整合。李飞飞的World Labs正被AMD收购,亚马逊正洽谈收购Decart,Rivian则刚刚收购Third Dimension,以将模拟能力引入内部用于自动驾驶测试。

Genie 4是Google在拥挤赛道中保持领先的最新举措。

Google在大约一年多前以研究预览形式发布了前代产品Genie 3。除了远比前代更逼真并具备音频功能外,Genie 4还允许自由形式编辑,例如实时改变天气或摄像机角度,或添加新人物或物体。它可以将一致场景维持长达两分钟,是前代上限的两倍,并提供更好的物理效果和更接近人类的角色。

Google的AI模型Gemini也与Genie 4更紧密地集成,充当“导演”,负责规划步骤并检查画面,而Genie负责生成视觉内容。在与Gemini Robotics相关的一项研究实验中,Gemini 4 Argon模型将任务分解为步骤,由Genie 4实时模拟。该实验展示了一种可能的方式:在真实世界发生之前,先在模拟中测试机器人场景。

“未来我们将越来越多地看到这种混合世界模型,即Gemini编写代码和文本,Genie实时接收并模拟不同抽象层次的现实,”Google研究总监Tejas Kulkarni在简报会上表示。

与其他世界模型一样,其宣传的商业用例包括游戏、互动学习和机器人。互动学习的一个推测性例子是:进入一幅历史场景的画作,并与画中人物谈论所描绘的事件。

但“可信测试者”(首批获得Google尖端产品访问权限的人)正指向一个可能的新用途:电影原型制作。

“实时性在创意领域保持心流状态非常有用的地方最有价值,”Google DeepMind工程师Diego Rivas在新闻简报会上表示。“例如,在构思阶段、分镜阶段——任何时候你需要快速构思。”

Google还提供Veo,这是其AI视频生成模型,可根据文本、图像或视频提示制作带内置同步音频的高清片段。

Rivas补充说,用户最终可能依赖Gemini Omni,将这些原型转化为创意资产。不过他表示,这些能力仍有一段距离。

在整个简报会中,Rivas强调Genie 4仍处于早期阶段,尚不清楚端到端产品体验会是什么样。团队也承认Genie 4仍有差距:模拟运行时间越长,细节和物体可能发生漂移;他们也还没完全弄清楚如何确保音频准确以及世界内文字清晰可读。

Genie 4目前以研究预览形式向可信测试者开放。未来几周,该模型将向Google AI Ultra订阅用户开放,用于Project Genie,并向Gemini API和Google AI Studio的早期访问合作伙伴开放。

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
中国台湾艺人阿雅在台湾光复纪念日当天转发新华社文章,公开表态“一个中国!”

中国台湾艺人阿雅在台湾光复纪念日当天转发新华社文章,公开表态“一个中国!”

都市快报橙柿互动
2026-10-26 13:34:24
曹操为什么总是亲征?网友的回答看的我目瞪口呆!

曹操为什么总是亲征?网友的回答看的我目瞪口呆!

夜深爱杂谈
2026-10-23 21:08:47
心疼!iPhone Duo折叠手机,首发日开合几次“内屏开裂”!维修费竟要7998元→

心疼!iPhone Duo折叠手机,首发日开合几次“内屏开裂”!维修费竟要7998元→

新民晚报
2026-10-27 18:18:54
折75001次屏幕就坏了!iPhone Duo耐用性遭网友调侃:非要手欠多折一次

折75001次屏幕就坏了!iPhone Duo耐用性遭网友调侃:非要手欠多折一次

快科技
2026-10-27 16:44:10
能感觉到这位诺奖得主有一种脚趾扣地的尴尬

能感觉到这位诺奖得主有一种脚趾扣地的尴尬

老实人互帮互助联盟
2026-10-27 13:44:46
我问了美院油画系的同学,王诗龄的绘画水平到底怎么样。同学轻轻叹气:我们最羡慕的,是她爷爷用画笔陪她长大。

我问了美院油画系的同学,王诗龄的绘画水平到底怎么样。同学轻轻叹气:我们最羡慕的,是她爷爷用画笔陪她长大。

背包旅行
2026-10-26 09:49:31
北京儿童医院主院区将迁出西城!8号线或东延至新院区

北京儿童医院主院区将迁出西城!8号线或东延至新院区

京城教育圈
2026-10-27 23:12:13
令人愤怒的“卖1元火鸡面”视频,炸出了多少被毁掉的中国小孩

令人愤怒的“卖1元火鸡面”视频,炸出了多少被毁掉的中国小孩

小椰子专栏
2026-10-26 13:02:17
有其父必有其子,政商旋转门轰然崩塌:黄然非同步被带走调查

有其父必有其子,政商旋转门轰然崩塌:黄然非同步被带走调查

十为先生
2026-10-27 18:06:42
时间定了!连休5天

时间定了!连休5天

连云港手机台
2026-10-26 11:36:42
情侣亲密时遭遇维修工开窗,男住客起诉酒店案开庭

情侣亲密时遭遇维修工开窗,男住客起诉酒店案开庭

现代快报
2026-10-27 20:05:59
1993年,刘善祥要查李真,被程维高阻拦:他没问题

1993年,刘善祥要查李真,被程维高阻拦:他没问题

贱议你读史
2026-10-27 00:54:05
生活中暗示都那么明显,居然还有人在犟呢!网友:听懂少走一半弯路

生活中暗示都那么明显,居然还有人在犟呢!网友:听懂少走一半弯路

另子维爱读史
2026-10-27 18:48:05
改写教科书!男性阴茎最敏感的“G点”首次被定位

改写教科书!男性阴茎最敏感的“G点”首次被定位

临药网
2026-10-27 07:59:56
舆论反转!张雪改装摩托水上滑行40.74公里,被质疑“没什么实际意义”,网友:你去查一下吉尼斯世界纪录,挑战都有实用意义吗

舆论反转!张雪改装摩托水上滑行40.74公里,被质疑“没什么实际意义”,网友:你去查一下吉尼斯世界纪录,挑战都有实用意义吗

火山詩话
2026-10-27 07:07:41
特朗普对俄罗斯发出通牒,泽连斯基底气大增,普京可能上当了

特朗普对俄罗斯发出通牒,泽连斯基底气大增,普京可能上当了

揽星戈
2026-10-27 00:55:40
裁判专家:温格提出的越位新规有95%的可能性已被欧足联否决

裁判专家:温格提出的越位新规有95%的可能性已被欧足联否决

懂球帝
2026-10-28 06:08:53
俄军投入12个集团军90万大军,这是全世界最大规模实战重兵集团!俄军在乌控区兵力密度,是伊拉克巅峰美军的近20倍,是阿富汗巅峰美军50倍

俄军投入12个集团军90万大军,这是全世界最大规模实战重兵集团!俄军在乌控区兵力密度,是伊拉克巅峰美军的近20倍,是阿富汗巅峰美军50倍

古古聊军事
2026-10-22 16:33:01
亲眼目睹藏族少女天葬之行,参加全过程后心悸:颠覆我对生死的认知

亲眼目睹藏族少女天葬之行,参加全过程后心悸:颠覆我对生死的认知

古怪奇谈录
2025-09-09 14:36:35
2胜3负,输上海12分。陈海涛叫回朱芳雨,不是换帅,是找台阶

2胜3负,输上海12分。陈海涛叫回朱芳雨,不是换帅,是找台阶

兰亭墨未干
2026-10-28 07:50:17
2026-10-28 12:55:00
金融界 incentive-icons
金融界
投资者信赖的财经金融门户网站
10258025文章数 547136关注度
往期回顾 全部

科技要闻

AI世界开口说话!谷歌新模型Genie 4有多神

头条要闻

东盟防长扩大会中国防长不去 中方代表身份披露

头条要闻

东盟防长扩大会中国防长不去 中方代表身份披露

体育要闻

0胜4负与篮网国王一桌 热火字母哥赌错了?

娱乐要闻

王心凌近况!分手已9年,如今还是单身

财经要闻

解密 “速成车”:一辆车怎样更快造出来?

汽车要闻

宾利MULLINER再展定制实力 推哥白尼主题限量版车型

态度原创

旅游
教育
时尚
游戏
亲子

旅游要闻

文旅新探丨胡杨染金额济纳

教育要闻

应对孩子厌学问题的实操过程

「初代恶女」的选择:比起做母亲,我更想先做自己

宁愿出实体收藏书也不出光盘 索尼PS实体策略引争议

亲子要闻

日常英语:一起烤蛋糕

无障碍浏览 进入关怀版