网易首页 > 网易号 > 正文 申请入驻

谷歌官宣Gemini 3,团队揭秘模型训练的两个“啊哈时刻” 哈萨比斯:“又向AGI迈进一步” |【经纬低调分享】

0
分享至

太平洋时间11月18日,谷歌正式推出Gemini 3,宣告在通用人工智能(AGI)探索之路上再进一步。

新一代模型凭借推理、多模态理解与编码三大核心能力的突破性提升,重新定义了AI与人类协作的边界,其训练过程中的两大“啊哈时刻”更直观展现了智能进化的飞跃——既能通过简单自然语言指令生成可交互3D游戏,又能深度解读古吉拉特语诗歌并完成创意二次创作,彰显出接近人类直觉的理解与创造能力。

在核心性能上,Gemini 3 Pro以1501分登顶LMSys Elo Arena排行榜,GPQA Diamonds测试准确率达91.9%,深度推理模式更将表现进一步提升;多模态领域凭借81%的MMMU-Pro分数与87.6%的Video-MMMU分数,成为全球顶尖多模态理解模型,可无缝处理长视频、混合语言食谱等复杂场景。编码层面创新推出“可视化编码”与“代理式编码”,前者实现想法到交互界面的直接转化,后者赋予AI自主拆解任务、调用工具的执行能力,让开发与日常事务处理效率倍增。

此次发布更标志着AI体验的全面重构:谷歌搜索首次同步接入Gemini 3,生成式UI实现从“答案引擎”到“发现创造引擎”的升级,让抽象知识可交互体验;Gemini应用新增动态视图、视觉布局等功能,Ultra订阅用户更可体验多任务自主处理的Gemini Agent。以下,Enjoy:

作者 | 周雅

来源 |科技行者

“Gemini 3的发布 ,代表团队在通往AGI(通用人工智能)路上迈出的又一步。”太平洋时间11月18日8:00,谷歌正式发布Gemini 3,Google DeepMind 首席执行官 Demis Hassabis 在谷歌博客中写道。


而就在一天前,谷歌举行了全球媒体沟通会,当被问及模型训练过程中的啊哈时刻时,Google DeepMind Gemini产品管理高级总监Tulsee Doshi,负责Gemini研发工作的她分享了两个瞬间。

第一个瞬间,是她第一次尝试可视化编码时,仅用非常简单的自然语言提示词,Gemini 3就能创造出一款游戏,甚至是可交互的3D可视化效果,还能在那个环境里“真的玩起来”。

第二个瞬间则更具人文色彩。Tulsee尝试让模型处理一首用“古吉拉特语”写成的诗,那是她父母的母语,不仅要求模型做翻译,还让它二次创作。“你能看到模型的细腻感、创造力、以及写作风格,我当时就觉得:哇,这个模型真的很聪明,能把很多元素融会贯通。”

这两个时刻,一个关乎创造,一个关乎理解,似乎都在指向这是一种更接近人类直觉的智能。Tulsee告诉我们,“当你把多模态输入、复杂推理问题,以及你想要的输出形式结合起来时,Gemini 3 的魔力就显现出来了。”



01

解构Gemini 3

梳理Gemini 3 的核心进步,可以概括为三个层面:推理能力、多模态理解能力、编码能力。

Google DeepMind首席技术官Koray Kavukcuoglu在媒体沟通会上这样描述Gemini 3的交流风格——“Gemini 3给出的回答聪明、简洁、直截了当。”

这种质变建立在「推理能力」之上。

LMSys Elo Arena排行榜上,Gemini 3 Pro 以1501分的突破性分数登顶,比其前代 Gemini 2.5 Pro 高出50个等级分;此外,在更考验深层理解的基准测试中,它的表现同样突出:GPQA Diamonds(一个衡量研究生水平推理与知识的基准测试)达到91.9%的准确率;Humanity’s Last Exam(一个要求多步逻辑和专家级推理的基准测试),不使用任何外部工具,Gemini 3 Pro 取得了37.5%的成绩。

这些数字背后,是模型正在往解决复杂问题的能力跃迁,它意味着 Gemini 3/Pro 在处理科学、数学等专业领域的复杂问题时,具备了更高可靠性。

为了进一步突破,谷歌还推出了一个名为Gemini 3 Deep Think(深度思考) 的增强推理模式。在内部测试中,Gemini 3 Deep Think 在Humanity's Last Exam(未使用工具时为 41.0%)和 GPQA Diamond(93.8%)中的表现,甚至还要优于 Gemini 3 Pro。

我们再来看Gemini 3的多模态理解能力。

Google与 Alphabet 首席执行官 Sundar Pichai 在谷歌博客中写道:“近两年前,我们开启了Gemini时代,这是我们公司有史以来最大的科学和产品项目之一。仅仅两年时间,人工智能就从单纯阅读文本和图像发展到能够读懂房间。”

“读懂房间”(reading the room)这个比喻,精准描述了 Gemini 3 在多模态理解上的进步。它不再是单一地处理文本、图像或音频,而是能够原生且无缝地理解这些信息模态之间的内在联系和细微差别。

根据官方数据,Gemini 3 Pro在衡量多模态能力的基准MMMU-ProVideo-MMMU上,分别取得了81%87.6%的分数,成为世界上最先进的多模态理解模型

这意味着什么?在实际应用中,用户可以向 Gemini 3 提供一段长达数小时的视频讲座,让它生成交互式的抽认卡帮助学习;可以上传一张手写的,甚至混杂着不同语言的家庭食谱照片,让它整理并翻译成可分享的电子版;甚至可以上传一段自己打球的视频,让模型分析动作并生成改进的训练计划。

这种能力,是谷歌从 Gemini 1.0 时代就确立的原则——原生多模态与长上下文,它让AI的输入和输出变得灵活,从而适应用户的个性化需求。

我们最后来看Gemini的编码能力。

如果说推理和多模态是 Gemini 3 的“大脑”,那么其强大的编码和规划能力就是它的“双手”,谷歌将此定义为代理式编码(Agentic Coding可视化编码(Vibe Coding,借此重新定义用户与信息的交互方式、开发者与机器的协作模式。

“Vibe Coding”也就是大家常说的氛围编程,这里的关键在于“Vibe”——一个模糊、感性的词,它指向的是一种全新的创造流程:用户提供一个抽象的想法、一种“感觉”或“氛围”,而AI则将其直接翻译成一个功能完备、视觉丰富、可交互的数字实体,可以理解为让开发“所见即所得”。

正如Tulsee的“啊哈时刻”所展示的,这指的是模型仅通过自然语言描述,就能生成丰富、美观、可交互的前端界面或应用。Gemini 3 Pro 在这方面实现了飞跃,能够处理更复杂的指令,渲染出更具交互性的网页。

如果说“可视化编码”(Agentic Coding)是Gemini 3引人注目的前台魔术,那么“代理式编码”(Agentic Coding)则是驱动其自主行动的后台引擎。

代理式编码(Agentic Coding,核心是赋予AI模型规划、拆解复杂任务、并自主调用工具(APIs、浏览器、本地文件系统)来完成任务的能力,它不再是一个被动回答问题的聊天机器人,而是一个可以被授权代表用户执行多步骤工作流的“数字代理”。

Google Gemini应用产品管理副总裁Chris Shuhar在沟通会上举例说:“像买演唱会门票这类事,以前要到处找各种信息,现在我可以让「代理」去找,帮我配好合适的组合,把流程推进到可以买票的那一步,然后我只需要一键确认就行。”

对于企业而言,“代理式编码”的意义更为深远。谷歌云AI副总裁兼总经理Saurabh Tiwary在谷歌博客中指出:“企业现在可以利用Gemini 3执行财务规划、供应链调整和合同评估等任务。”

谷歌的合作伙伴也印证了这一点。Shopify首席技术官Mikhail Parakhin表示:“这一进步加速了Shopify构建代理式AI工具的能力,解决我们商户复杂的商业挑战。”汤森路透首席技术官Joel Harlon则提到,他们在法律推理和复杂合同理解方面取得了“可衡量的、显著的进展”。

综合来看,Gemini 3 不只是一个被动响应指令的工具,它被设计成一个主动的、有规划能力的“伙伴”或“代理”,能够理解复杂目标,拆解多步任务,并自主执行。这一特性,正是谷歌重塑其核心产品与开发者生态的基石。

02

体验的重构:AI如何进入你的日常?


拥有了如此强大的智能,接下来的关键问题是:谷歌打算如何将其交付给数十亿用户?答案并非简单地更新一个应用,而是从根本上重构用户与信息交互的“体验”。谷歌搜索和 Gemini 应用,成为了这场变革的前沿阵地。

1、当Gemini 3引入谷歌搜索:从答案引擎发现与创造引擎”。

“这是我们首次从第一天起就在谷歌搜索中上线Gemini 3。” 谷歌搜索部门产品副总裁Robby Stein在会上强调。这一举动意义重大,它标志着谷歌最核心的产品,正在被最前沿的AI模型深度重塑。

首先,Gemini 3让搜索不再只是回答问题

举个例子:一个关于冲浪的问题,涉及天气、海况、租赁、去哪儿、时间安排等多个方面,Gemini 3会进行推理、做检索、构建整页信息,从谷歌地图数据库中直接拉取地点信息,给到出行安排建议。

那么,Gemini是如何找到这些可靠信息的呢?谷歌有个技术叫查询扇出(query fan:当用户提出一个复杂问题,Gemini 3 不再只是寻找单一答案,它会将这个问题“扇出”数十个更细分的查询,在底层进行大量检索,综合来自全网、知识图谱(包含万亿级事实)、谷歌地图(数亿地点)和谷歌产品数据库(数十亿产品)的信息,最终构建出一个包含地点建议、时间安排、地图信息的完整规划页面。这让搜索从“回答”走向了“规划”。

其次,Gemini 3让搜索实现了生成式用户界面Generative UI)。

这是我认为 Gemini 3 带来的最具变革性的体验,AI 不再只是生成内容,它开始实时动态生成一个为你的搜索量身定制的可视化界面。

假如你正在搜索“受力分析背后的物理原理”时,传统的搜索引擎会给你链接、文本和视频。而由Gemini 3驱动的搜索引擎则更进一步,它不仅生成文字解释,更实时编写并渲染了一个交互式模拟器:比如“三个行星在海洋中”的系统,展示它们的物理运行机制,甚至包括当你向环境引入“混沌”时会发生什么。“借助 Gemini 3,你将‘看见并交互’以往无法做到的抽象概念,从而学习任何东西。”Robby指出。

谷歌搜索副总裁 Elizabeth Reid 指出,这些由Gemini 3实时生成的动态布局、互动工具和模拟,正在将搜索变成一个强大的发现引擎学习引擎,让用户能够看见并交互以往无法做到的抽象概念。

对于普通用户,这意味着信息获取从“阅读”升级为“体验”。学习物理定律不再是背诵公式,而是亲手操作模拟器;规划旅行不再是整理列表,而是浏览一本动态生成的旅行手册。这极大地提升了用户粘性和产品体验的丰富度。

对于开发者和创作者,这意味着原型设计的门槛被无限拉低。一个独立开发者或产品经理,可以在几秒钟内将一个模糊的想法变成一个可点击、可演示的应用,极大地加速了创新迭代的速度。

2、当Gemini 3引入Gemini应用:迈向真正的通用代理。

作为谷歌AI能力的集中体现,Gemini应用的月活跃用户已从上一季度的4.5亿增长至6.5亿。Gemini 3 的到来,则为其注入了更强大的动力,并带来了两个实验性的新方向。

第一个是动态视图(Dynamic Views)。在Gemini应用中,当用户提出一个需求,比如“为每件作品解释梵高画廊的生活背景”,Gemini 3会利用其“代理式编码”能力,实时设计并编写一个定制化的用户界面。用户得到的不再是静态文本,而是一个可以点击、滚动来探索的交互式画廊。

第二个是视觉布局(Visual Layouts)。同样在Gemini应用中,当用户提出“计划明年夏天去罗马三天的旅行”时,模型会生成一个沉浸式的、杂志风格的可视化行程,其中包含图片、地图模块和可交互的日程。

第三个是Gemini Agent这项面向 Google AI Ultra 订阅用户的实验性功能,允许 Gemini 直接处理多步骤任务,它连接用户的 Google 应用,完成管理日历、添加提醒、整理收件箱等琐事,且经过你批准后可以优先处理待办事项和草拟回复。你也可以给出具体指示,比如:“用邮件里的信息帮我预订一辆中型 SUV,价格在每天 80 美元以下。”Gemini 会查找你的航班信息,在预算内安排预订。

谷歌方面指出,即日起, 美国的 Google AI Pro 和 Ultra 用户 可以通过在 AI Mode模式的下拉菜单中选择“思考(Thinking)”,即可体验 Gemini 3 系列首款型号 Gemini 3 Pro,包括生成式UI等体验。很快,将在美国所有用户中推出 Gemini 3 的 AI Mode模式。

03

开发者和企业的“谷歌反重力”


如果说在消费端,Gemini 3 致力于重构“用户体验”;那么在开发者和企业端,它的目标则是重塑“生产力范式”。为此,谷歌推出了一个全新的、命名极具野心的平台——Google AntiGravity(谷歌反重力)。

“我们想推动‘模型与IDE(集成开发环境)如何协同工作’的前沿,让软件工程师的生产力显著提升。”Koray Kavukcuoglu 强调。

谷歌反重力不是对现有IDE的简单改良,而是一个全新的智能体开发平台平台中,“代理或智能体”被提升到一个专门的界面,拥有与开发者平等的地位,它不再是编辑器里的一个插件,而是一个可以自主访问编辑器、终端、甚至内置浏览器的“伙伴”。

有了该平台,开发者不再需要逐行编写或调试代码,而是可以在更高的抽象层级下达“任务”。例如,开发者只需给出一个高层级的提示:“创建一个航班跟踪的Web应用”。接到任务后,“谷歌反重力”平台中的 Gemini 3 会自主将其分解为子任务,规划执行路径,并开始编码,它会在 Chrome 浏览器中启动应用来自我校验,并在关键节点生成进度报告,向开发者寻求确认。随着使用,系统会学习开发者的架构偏好和编码风格,在后续项目中变得越来越默契。

Koray进一步向我们阐明了谷歌反重力的战略定位。它是谷歌与开发者直接互动、理解其工作流与挑战的“触点”,通过这个平台收集到的反馈,将反过来打磨谷歌的模型,使其更适合“以智能体为中心”的开发模式。这形成了一个研发闭环。

除了“谷歌反重力”这一旗舰项目,Gemini 3 的编码能力也通过 API 全面开放,并已集成到 Cursor、GitHub、JetBrains、Replit 等第三方平台。Shopify 首席技术官 Mikhail Parakhin 对此表示:“这一进步加速了 Shopify 构建代理型 AI 工具的能力,以解决我们商户复杂的商业挑战。”

这也标志着软件开发的逻辑正在发生深刻变化,开发者正在从代码的编写者转变为代理的指挥者,工作的重心从繁琐的实现细节,转移到更高层级的架构设计和创意构想。

04

谷歌的全栈赌注与速度之争


在发布会的每一个环节,从模型研发到产品落地,谷歌的发言人反复强调一个词:全栈full-stack)。这是一个技术术语,也是理解谷歌AI战略、乃至其在激烈竞争中保持领先的关键钥匙。

所谓“全栈”,通俗解释是指一个从硬件到软件、从研究到产品的垂直整合体系。对应到谷歌是四个层面的能力:在硬件层,谷歌自研的 TPU 芯片和专为大规模训练设计的数据中心与计算集群(Pod)。在研究层,以 Google DeepMind 为核心的世界级前沿研究,产出如 AlphaFold 等诺贝尔奖级别的成果。在模型与工具层,谷歌基于强大的硬件和研究能力,开发出像 Gemini 这样的基础模型。在产品与平台层,谷歌将模型能力迅速、深度地整合到谷歌搜索、云、Gemini应用等触达数十亿用户的产品中。


这种“全栈”路径的最大优势在于“速度”和“协同”。正如Robby所说,它能大幅缩短模型开发完成在产品中展示给大量用户之间的时间”。Gemini 3 在发布首日即进入谷歌搜索,就是这一优势的直接证明。

Koray认为,衡量大模型进步的最好方式是看AI对各行业的实际影响。“在越来越多行业,越来越多职业中,员工用模型来辅助工作,学生用模型来辅助学习……模型在我们的日常生活中影响越来越大。”

他的言下之意是,单纯的模型参数或基准分数的增长曲线或许会变化,但由模型能力提升所驱动的“应用创新”和“价值创造”的速度并未放缓。谷歌的全栈路径,确保了模型能力的每一次提升,都能迅速转化为产品体验的改进和用户价值的增长,这本身就是一种速度。

这种速度与协同最终服务于商业。在企业端,Gemini 3 通过 Vertex AI 和 Gemini Enterprise 平台提供给企业客户。来自 Box、汤森路透、乐天集团等首发合作伙伴,验证了其在法律推理、合同分析、多模态数据处理等复杂商业场景中的价值。

通过将最强大的模型能力打包成企业级解决方案,谷歌正在构建一个从消费者洞察到企业服务的完整商业闭环。消费级产品(如搜索和Gemini应用)提供了海量用户数据和真实应用场景,用于迭代模型;而企业级服务,则将这些经过验证的强大能力商业化,创造直接收入。


特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
中国官员双手插兜后续:日方上下齐破防,刘劲松及外交部分别回应

中国官员双手插兜后续:日方上下齐破防,刘劲松及外交部分别回应

吭哧有力
2025-11-19 17:58:37
11月19日俄乌:美俄联手给乌克兰“搞事情”?

11月19日俄乌:美俄联手给乌克兰“搞事情”?

山河路口
2025-11-19 17:11:23
今夜,暴跌!突发,黑天鹅!

今夜,暴跌!突发,黑天鹅!

中国基金报
2025-11-19 00:16:16
郑丽文上任首开铡,陆配首位常委何鹰鹭遭停职

郑丽文上任首开铡,陆配首位常委何鹰鹭遭停职

南宫一二
2025-11-19 10:45:32
网传男子吐槽自己醉驾被双开,十年努力成泡影,家庭、工作都没了

网传男子吐槽自己醉驾被双开,十年努力成泡影,家庭、工作都没了

笔尖下的人生
2025-11-19 18:51:43
美女美图7139期

美女美图7139期

手工制作阿歼
2025-11-14 08:13:28
王馨平本就好看,加上爱运动,50多岁了看起来还那么有魅力

王馨平本就好看,加上爱运动,50多岁了看起来还那么有魅力

东方不败然多多
2025-11-18 13:36:22
刚刚!美股突然大跳水!发生什么了?

刚刚!美股突然大跳水!发生什么了?

龙行天下虎
2025-11-20 01:47:15
中日交涉启动,谁将成为最大输家?

中日交涉启动,谁将成为最大输家?

阿光的技巧课堂
2025-11-20 01:09:31
突然,跳水!外围,传来大消息!

突然,跳水!外围,传来大消息!

证券时报
2025-11-19 14:12:04
奔驰女司机停车长裙掩护当街大便画面曝光,网友批:不清理吗?

奔驰女司机停车长裙掩护当街大便画面曝光,网友批:不清理吗?

环球趣闻分享
2025-11-19 20:23:57
后悔已经晚了?2大芯片巨头“弃中投美”,中国不会再原谅

后悔已经晚了?2大芯片巨头“弃中投美”,中国不会再原谅

生活新鲜市
2025-11-20 03:06:20
再见皇马!6500万新大罗离队!传射兼备,天赋高,远赴法甲拿金靴

再见皇马!6500万新大罗离队!传射兼备,天赋高,远赴法甲拿金靴

阿泰希特
2025-11-19 11:38:19
CCTV5直播!樊振东回应男团决赛打王楚钦!北京3-0大胜广东!

CCTV5直播!樊振东回应男团决赛打王楚钦!北京3-0大胜广东!

好乒乓
2025-11-19 08:37:51
小米汽车炸翻全场,雷军再度封神!

小米汽车炸翻全场,雷军再度封神!

鸣金网
2025-11-19 12:30:41
中方拒见高市早苗,美海军部长访日又添了一把火,不许日本退缩?

中方拒见高市早苗,美海军部长访日又添了一把火,不许日本退缩?

现代小青青慕慕
2025-11-19 08:36:48
徐静雨:这一战是杨瀚森的立身之战,不会再被轻易下放了

徐静雨:这一战是杨瀚森的立身之战,不会再被轻易下放了

懂球帝
2025-11-19 15:17:09
中国电子侦察船抓住美航母的7处漏洞,逼停航母编队,被迫让路2小时

中国电子侦察船抓住美航母的7处漏洞,逼停航母编队,被迫让路2小时

睡前讲故事
2025-04-02 10:56:11
“国际模特大赛”15号模特获广东冠军引争议,组委会回应:负责人生病无法接受采访,后续会给大家交代;有评委称“连评分表都没看到”

“国际模特大赛”15号模特获广东冠军引争议,组委会回应:负责人生病无法接受采访,后续会给大家交代;有评委称“连评分表都没看到”

极目新闻
2025-11-19 11:31:22
太无耻!男子陈某被捕,10天找了5个美女:无非就是想白嫖

太无耻!男子陈某被捕,10天找了5个美女:无非就是想白嫖

潇湘晨报
2025-11-19 09:20:30
2025-11-20 04:47:00
经纬创投 incentive-icons
经纬创投
经纬创投公众平台
2409文章数 7209关注度
往期回顾 全部

科技要闻

一夜封神,Gemini 3让谷歌找回“碾压感”

头条要闻

日方要求解释为何未告知磋商后会有媒体拍摄 中方回应

头条要闻

日方要求解释为何未告知磋商后会有媒体拍摄 中方回应

体育要闻

世界杯最小参赛国诞生!15万人岛国的奇迹

娱乐要闻

史林子出轨对方前妻放锤!

财经要闻

重磅!中金公司拟收购东兴与信达证券

汽车要闻

此刻价格不重要 第5代帝豪本身就是价值

态度原创

旅游
房产
本地
手机
家居

旅游要闻

穿越古冰川,非遗活在山水间!螺髻山彝历新年奏响文旅融合最强音

房产要闻

29.4亿!海南“地王”片区,要卖超级宅地!

本地新闻

第十二届影展携手重庆来福士丨两江交汇,光影共生

手机要闻

OPPO Find X9系列海外卖爆!销量接近上代2倍

家居要闻

水岸美学 书香人文生活

无障碍浏览 进入关怀版