网易首页 > 网易号 > 正文 申请入驻

谷歌发布Agentic Vision:模仿人类处理图像,让AI学会“放大看”

0
分享至

IT之家 1 月 28 日消息,谷歌 DeepMind 团队昨日(1 月 27 日)发布博文,宣布在 Gemini 3 Flash 模型基础上,推出“智能体视觉”(Agentic Vision)功能。

IT之家援引博文介绍,传统 AI 模型在处理图像时,通常仅进行一次静态扫描,这种方式若遗漏了芯片序列号或远处的路牌等细微细节,模型便只能依靠猜测来生成答案。

Gemini 3 Flash 引入的“智能体视觉”打破了这一局限,将视觉理解转化为一个主动调查的过程。模型不再被动接收信息,而是通过结合视觉推理与代码执行,模仿人类“思考、行动、观察”循环处理图像,从而确立答案的视觉证据。


“智能体视觉”功能的核心,在于形成“思考-行动-观察”闭环:

  • 首先是“思考”阶段,模型分析用户查询和初始图像,制定多步计划;
  • 紧接着进入“行动”阶段,模型生成并执行 Python 代码来主动操作图像(如裁剪、旋转、标注)或进行分析(如计算边界框);
  • 最后是“观察”阶段,变换后的图像被追加到模型的上下文窗口中。

这一机制让 Gemini 3 Flash 能够利用更新后的数据和更佳的语境进行二次检查,从而生成基于事实的最终回复。


引入代码执行能力后,Gemini 3 Flash 在多数视觉基准测试中质量提升了 5-10%。以建筑图纸验证平台 PlanCheckSolver.com 为例,该平台利用此功能让模型通过代码裁剪并分析屋顶边缘等高分辨率细节,使准确率提高了 5%。


此外,在处理视觉数学问题时,模型不再依赖概率猜测,而是通过编写代码识别原始数据并调用 Matplotlib 库绘制精确图表,有效解决了大型语言模型在多步视觉算术中常见的“幻觉”问题。



Google DeepMind 表示这仅仅是开始。目前的 Gemini 3 Flash 已擅长隐式决定何时放大细节,未来版本将无需用户显式提示即可自动执行旋转图像或视觉运算等操作。

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
连续7场没过人,C罗变了!世界杯淘汰赛将战老队友莫德里奇

连续7场没过人,C罗变了!世界杯淘汰赛将战老队友莫德里奇

红星新闻
2026-06-28 13:14:10
凌晨3点 世界杯首场淘汰赛!7万人围观 无论谁赢都将创历史

凌晨3点 世界杯首场淘汰赛!7万人围观 无论谁赢都将创历史

叶青足球世界
2026-06-28 16:30:33
延迟退休舆论降温的背后,不是黄了,是卡住了

延迟退休舆论降温的背后,不是黄了,是卡住了

大道微言
2026-06-28 09:09:49
乌克兰新玩法!让全球玩家操纵无人机,若消灭俄军将会有现金奖励

乌克兰新玩法!让全球玩家操纵无人机,若消灭俄军将会有现金奖励

爆角追踪
2026-06-28 21:03:53
吴艳妮全国田径冠军赛夺冠,锁定亚运会参赛资格

吴艳妮全国田径冠军赛夺冠,锁定亚运会参赛资格

封面新闻
2026-06-28 10:44:06
中央层面树立和践行正确政绩观学习教育工作专班 中央纪委办公厅公开通报广西壮族自治区南宁市、甘肃省酒泉市新城区、浙江省杭州市萧山区3起政绩观偏差问题

中央层面树立和践行正确政绩观学习教育工作专班 中央纪委办公厅公开通报广西壮族自治区南宁市、甘肃省酒泉市新城区、浙江省杭州市萧山区3起政绩观偏差问题

新华社
2026-06-28 19:02:03
比韩国队还惨!取消包机+球员自购机票回国,世界第16轰然倒下

比韩国队还惨!取消包机+球员自购机票回国,世界第16轰然倒下

鸣哥说体育
2026-06-28 13:27:00
全国唯一健在长征女红军在四川过105岁生日,“红军的火把,是她见过最亮的光”

全国唯一健在长征女红军在四川过105岁生日,“红军的火把,是她见过最亮的光”

封面新闻
2026-06-28 04:44:16
强势美元回归,可怕的暴风雨要来了

强势美元回归,可怕的暴风雨要来了

光远看经济
2026-06-28 19:01:43
冷门专业不是“人生弯路”!北大考古女孩入职敦煌研究院再上热搜

冷门专业不是“人生弯路”!北大考古女孩入职敦煌研究院再上热搜

火山詩话
2026-06-27 20:42:41
尊界冲刺138.8万元 余承东照着提词器念了20分钟

尊界冲刺138.8万元 余承东照着提词器念了20分钟

经济观察报
2026-06-27 21:03:27
韩国总统李在明怒批韩国队:世界杯出局太荒唐!韩国足协:取消接机

韩国总统李在明怒批韩国队:世界杯出局太荒唐!韩国足协:取消接机

浙江之声
2026-06-28 18:11:19
倒闭潮来袭!一深耕东莞15年、近500员工的大型电子厂宣告解散

倒闭潮来袭!一深耕东莞15年、近500员工的大型电子厂宣告解散

火山詩话
2026-06-28 07:42:30
淘汰赛开打!德法硬碰硬,葡萄牙难进8强,阿根廷一只脚进半决赛

淘汰赛开打!德法硬碰硬,葡萄牙难进8强,阿根廷一只脚进半决赛

十点街球体育
2026-06-28 15:22:12
小仙女为了8000元“举报全班师生”,老师被停职,全班学生延毕

小仙女为了8000元“举报全班师生”,老师被停职,全班学生延毕

妍妍教育日记
2026-06-28 08:10:07
随着阿根廷3-1,奥地利3-3,世界杯32强全部诞生:亚洲仅2队

随着阿根廷3-1,奥地利3-3,世界杯32强全部诞生:亚洲仅2队

侧身凌空斩
2026-06-28 12:04:42
缴费通知:7月1日实施!退休人员也需缴纳

缴费通知:7月1日实施!退休人员也需缴纳

锦绣太原
2026-06-27 18:36:16
陕西一38岁女子接女儿放学途中,被卷入车底,群众合力抬车救人,家属回应:已不幸去世,事故正由交警调查处理

陕西一38岁女子接女儿放学途中,被卷入车底,群众合力抬车救人,家属回应:已不幸去世,事故正由交警调查处理

扬子晚报
2026-06-28 19:06:58
世界杯死亡半区诞生!葡萄牙自食苦果,英格兰原地摆烂

世界杯死亡半区诞生!葡萄牙自食苦果,英格兰原地摆烂

新新自圆其说说体育
2026-06-28 11:13:19
冯小刚新片彻底扑街!袁立犀利发文不留情面:你的时代已经结束了

冯小刚新片彻底扑街!袁立犀利发文不留情面:你的时代已经结束了

行者聊官
2026-06-26 21:29:01
2026-06-28 21:44:49
IT之家
IT之家
爱科技,爱这里 - 前沿科技人气平台
352026文章数 607316关注度
往期回顾 全部

科技要闻

DeepSeek最新论文:如何让大模型跑得更快

头条要闻

C罗变了连续7场没过人 淘汰赛将对战老队友莫德里奇

头条要闻

C罗变了连续7场没过人 淘汰赛将对战老队友莫德里奇

体育要闻

韩国可算确定被淘汰了

娱乐要闻

曾沛慈拿下《乘风2026》年度总冠军

财经要闻

两只股票撑起的韩国股市,半年熔断 33 次

汽车要闻

搭载华为乾崑六件套 东风奕派M8预售19.98万起

态度原创

家居
手机
数码
房产
公开课

家居要闻

绿意盎然 自然之境

手机要闻

vivo X Fold6维修备件价格公布,vivo X500E曝光

数码要闻

烧毁史上最惨RTX 5090!16针接口炸无踪影 GPU和显存全毁

房产要闻

全国高考大放水,300分就能上本科!论上岸率,海南没输过!

公开课

李玫瑾:为什么性格比能力更重要?

无障碍浏览 进入关怀版