网易首页 > 网易号 > 正文 申请入驻

谷歌发布Agentic Vision:模仿人类处理图像,让AI学会“放大看”

0
分享至

谷歌 DeepMind 团队昨日(1 月 27 日)发布博文,宣布在 Gemini 3 Flash 模型基础上,推出“智能体视觉”(Agentic Vision)功能。

IT之家援引博文介绍,传统 AI 模型在处理图像时,通常仅进行一次静态扫描,这种方式若遗漏了芯片序列号或远处的路牌等细微细节,模型便只能依靠猜测来生成答案。

Gemini 3 Flash 引入的“智能体视觉”打破了这一局限,将视觉理解转化为一个主动调查的过程。模型不再被动接收信息,而是通过结合视觉推理与代码执行,模仿人类“思考、行动、观察”循环处理图像,从而确立答案的视觉证据。

“智能体视觉”功能的核心,在于形成“思考-行动-观察”闭环:

首先是“思考”阶段,模型分析用户查询和初始图像,制定多步计划;

紧接着进入“行动”阶段,模型生成并执行 Python 代码来主动操作图像(如裁剪、旋转、标注)或进行分析(如计算边界框);

最后是“观察”阶段,变换后的图像被追加到模型的上下文窗口中。

这一机制让 Gemini 3 Flash 能够利用更新后的数据和更佳的语境进行二次检查,从而生成基于事实的最终回复。

引入代码执行能力后,Gemini 3 Flash 在多数视觉基准测试中质量提升了 5-10%。以建筑图纸验证平台 PlanCheckSolver.com 为例,该平台利用此功能让模型通过代码裁剪并分析屋顶边缘等高分辨率细节,使准确率提高了 5%。

此外,在处理视觉数学问题时,模型不再依赖概率猜测,而是通过编写代码识别原始数据并调用 Matplotlib 库绘制精确图表,有效解决了大型语言模型在多步视觉算术中常见的“幻觉”问题。

Google DeepMind 表示这仅仅是开始。目前的 Gemini 3 Flash 已擅长隐式决定何时放大细节,未来版本将无需用户显式提示即可自动执行旋转图像或视觉运算等操作。

本文源自:IT之家

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
中央另有任用的郭永航,当选新职务!此前任广州市委书记

中央另有任用的郭永航,当选新职务!此前任广州市委书记

上观新闻
2026-01-28 12:59:05
救救美国的中产吧,他们都快要饿死了!

救救美国的中产吧,他们都快要饿死了!

走读新生
2026-01-27 21:49:52
四川省交通运输厅原副厅长宁坚被“双开”

四川省交通运输厅原副厅长宁坚被“双开”

界面新闻
2026-01-28 16:31:39
小卡21分7篮板快船击败爵士3连胜,哈登16分10助攻马尔卡宁19分

小卡21分7篮板快船击败爵士3连胜,哈登16分10助攻马尔卡宁19分

湖人崛起
2026-01-28 13:30:34
美国被曝对伊朗行动的准备在两周内完成

美国被曝对伊朗行动的准备在两周内完成

潇湘晨报
2026-01-28 16:13:12
你被中国保护得太好了,所以很傻很天真

你被中国保护得太好了,所以很傻很天真

一个坏土豆
2026-01-27 19:51:27
“女子考编第1因学历重叠政审不合格”最新进展:该岗位已由第2名递补

“女子考编第1因学历重叠政审不合格”最新进展:该岗位已由第2名递补

极目新闻
2026-01-28 11:38:11
塔图姆谈奥运会遭DNP:不能理解,我是NBA一阵里唯一的美国人

塔图姆谈奥运会遭DNP:不能理解,我是NBA一阵里唯一的美国人

懂球帝
2026-01-28 13:44:19
普通人的机会来了!烟草三代、电力世家成历史,多地开刀近亲繁殖

普通人的机会来了!烟草三代、电力世家成历史,多地开刀近亲繁殖

火山诗话
2026-01-28 09:47:20
人神共愤!最新数据曝光,伊朗神权政府血债累累

人神共愤!最新数据曝光,伊朗神权政府血债累累

山间听雨
2026-01-27 20:05:08
宇树科技官宣!

宇树科技官宣!

每日经济新闻
2026-01-26 20:58:07
目之所及,政治生态正在幼态化

目之所及,政治生态正在幼态化

黔有虎
2026-01-27 09:45:03
男子千里送发动机后续:客户正脸曝光 全款已退不再合作 警方介入

男子千里送发动机后续:客户正脸曝光 全款已退不再合作 警方介入

离离言几许
2026-01-28 00:13:38
贝克汉姆14岁女儿挎香奈儿,却也比父母节俭,“不上学”引发争议

贝克汉姆14岁女儿挎香奈儿,却也比父母节俭,“不上学”引发争议

译言
2026-01-28 08:36:25
伊朗出手,监控石油“咽喉”通道!伊立巨幅画暗指美航母被炸,配文“煽风者将得到风暴”!伊朗将领:邻国领土不得用于攻击伊朗

伊朗出手,监控石油“咽喉”通道!伊立巨幅画暗指美航母被炸,配文“煽风者将得到风暴”!伊朗将领:邻国领土不得用于攻击伊朗

每日经济新闻
2026-01-28 09:35:07
熔断!刚刚,崩盘了

熔断!刚刚,崩盘了

中国基金报
2026-01-28 15:23:09
陪读妈妈怒怼牢A,脖子上的“认主项链”被沪爷认出,暴露真相

陪读妈妈怒怼牢A,脖子上的“认主项链”被沪爷认出,暴露真相

妍妍教育日记
2026-01-27 20:19:13
中印加勒万河谷肉搏战:680人八小时混战,双方到底伤亡多少人?

中印加勒万河谷肉搏战:680人八小时混战,双方到底伤亡多少人?

叹为观止易
2026-01-28 14:25:41
国足2-2仅1夜,最强首发11人浮现!邵佳一大换血,7位U23国脚补充

国足2-2仅1夜,最强首发11人浮现!邵佳一大换血,7位U23国脚补充

侃球熊弟
2026-01-28 00:05:03
黄仁勋上海菜场签名红包被99万挂二手平台!商家开口要10万定金…

黄仁勋上海菜场签名红包被99万挂二手平台!商家开口要10万定金…

柴狗夫斯基
2026-01-28 08:32:37
2026-01-28 18:36:49
金融界 incentive-icons
金融界
投资者信赖的财经金融门户网站
9194706文章数 545805关注度
往期回顾 全部

科技要闻

它是神也是毒!Clawdbot改名卷入千万诈骗

头条要闻

男子姓"苟"怕女儿尴尬一起改姓"敬":没想到真的解决了

头条要闻

男子姓"苟"怕女儿尴尬一起改姓"敬":没想到真的解决了

体育要闻

库明加和科尔,一段不该有的事故!

娱乐要闻

王祖贤入驻某音:一条7秒视频吸粉55万

财经要闻

40倍杠杆断裂!水贝一黄金平台兑付困难

汽车要闻

新手必看!冰雪路面不敢开?记住这4点 关键时刻真能保命

态度原创

数码
亲子
本地
公开课
军事航空

数码要闻

华为“Runner”系列专业跑表回归 携手运动员基普乔格

亲子要闻

3岁小男孩手指被压碎,仅是两秒钟的不注意,父亲却可能愧疚一生

本地新闻

云游中国|拨开云雾,巫山每帧都是航拍大片

公开课

李玫瑾:为什么性格比能力更重要?

军事要闻

伊朗竖起巨幅宣传画:一艘美军航母被炸

无障碍浏览 进入关怀版