网易首页 > 网易号 > 正文 申请入驻

谷歌发布Agentic Vision:模仿人类处理图像,让AI学会“放大看”

0
分享至

IT之家 1 月 28 日消息,谷歌 DeepMind 团队昨日(1 月 27 日)发布博文,宣布在 Gemini 3 Flash 模型基础上,推出“智能体视觉”(Agentic Vision)功能。

IT之家援引博文介绍,传统 AI 模型在处理图像时,通常仅进行一次静态扫描,这种方式若遗漏了芯片序列号或远处的路牌等细微细节,模型便只能依靠猜测来生成答案。

Gemini 3 Flash 引入的“智能体视觉”打破了这一局限,将视觉理解转化为一个主动调查的过程。模型不再被动接收信息,而是通过结合视觉推理与代码执行,模仿人类“思考、行动、观察”循环处理图像,从而确立答案的视觉证据。


“智能体视觉”功能的核心,在于形成“思考-行动-观察”闭环:

  • 首先是“思考”阶段,模型分析用户查询和初始图像,制定多步计划;
  • 紧接着进入“行动”阶段,模型生成并执行 Python 代码来主动操作图像(如裁剪、旋转、标注)或进行分析(如计算边界框);
  • 最后是“观察”阶段,变换后的图像被追加到模型的上下文窗口中。

这一机制让 Gemini 3 Flash 能够利用更新后的数据和更佳的语境进行二次检查,从而生成基于事实的最终回复。


引入代码执行能力后,Gemini 3 Flash 在多数视觉基准测试中质量提升了 5-10%。以建筑图纸验证平台 PlanCheckSolver.com 为例,该平台利用此功能让模型通过代码裁剪并分析屋顶边缘等高分辨率细节,使准确率提高了 5%。


此外,在处理视觉数学问题时,模型不再依赖概率猜测,而是通过编写代码识别原始数据并调用 Matplotlib 库绘制精确图表,有效解决了大型语言模型在多步视觉算术中常见的“幻觉”问题。



Google DeepMind 表示这仅仅是开始。目前的 Gemini 3 Flash 已擅长隐式决定何时放大细节,未来版本将无需用户显式提示即可自动执行旋转图像或视觉运算等操作。

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
山东客战领头羊,邱彪等来好消息,高诗岩猛夸一人:这不库里么?

山东客战领头羊,邱彪等来好消息,高诗岩猛夸一人:这不库里么?

萌兰聊个球
2026-01-28 10:16:55
尘埃落定!山东泰山喜迎21岁强援,双赢交易,俱乐部决定很用心

尘埃落定!山东泰山喜迎21岁强援,双赢交易,俱乐部决定很用心

篮球看比赛
2026-01-28 09:54:39
沉默24小时后,卡尼终于发声,否认与中国签协议,美财长得寸进尺

沉默24小时后,卡尼终于发声,否认与中国签协议,美财长得寸进尺

通文知史
2026-01-27 13:45:03
张智霖儿子假期归港,魔童185个头仪态超好,五官神似妈妈!

张智霖儿子假期归港,魔童185个头仪态超好,五官神似妈妈!

东方不败然多多
2026-01-28 17:35:07
智驾救不了电车,失去补贴之后,全球电车销量都在倒退!

智驾救不了电车,失去补贴之后,全球电车销量都在倒退!

柏铭锐谈
2026-01-27 23:43:30
当年为何要炸掉西湖边的秋瑾墓?

当年为何要炸掉西湖边的秋瑾墓?

吕醿极限手工
2026-01-27 14:36:43
国产大模型密集发布,“春节AI竞赛”提前开幕

国产大模型密集发布,“春节AI竞赛”提前开幕

第一财经资讯
2026-01-28 17:04:49
中央安全生产考核巡查组第四组在重庆发现:部分企业安全管理松懈 “最后一公里”短板突出

中央安全生产考核巡查组第四组在重庆发现:部分企业安全管理松懈 “最后一公里”短板突出

九龙网
2026-01-27 15:11:07
每月多交10吨水费?蓝泡泡正在悄悄掏空你的钱包

每月多交10吨水费?蓝泡泡正在悄悄掏空你的钱包

民言民语
2026-01-28 13:13:28
情况有变!国民党突然认怂,国共论坛出现变数,郑丽文决意窜美

情况有变!国民党突然认怂,国共论坛出现变数,郑丽文决意窜美

呼呼历史论
2026-01-28 17:04:51
小男孩考试没考好,自己画奖状回去交差,爸爸奖励10元

小男孩考试没考好,自己画奖状回去交差,爸爸奖励10元

凌晨妈妈
2026-01-26 15:14:57
甘肃俩兄弟失联噩耗传来!遗体已找到,现场惨不忍睹,父母遭网暴

甘肃俩兄弟失联噩耗传来!遗体已找到,现场惨不忍睹,父母遭网暴

米果说识
2026-01-28 16:30:23
A股:今日行情不对劲,主力不装摊牌了!做好准备,行情将大变盘

A股:今日行情不对劲,主力不装摊牌了!做好准备,行情将大变盘

虎哥闲聊
2026-01-28 11:39:00
伊朗货币兑美元汇率跌至创纪录低点 达到150万里亚尔兑换1美元

伊朗货币兑美元汇率跌至创纪录低点 达到150万里亚尔兑换1美元

财联社
2026-01-27 19:17:06
独家调查|加拿大医生携幼女来沪求医,花16万元“保脾”!中国医疗不止性价比

独家调查|加拿大医生携幼女来沪求医,花16万元“保脾”!中国医疗不止性价比

第一财经资讯
2026-01-25 19:04:21
代孕只是“冰山一角”!张雨绮更多猛料被扒出,放纵的代价太大

代孕只是“冰山一角”!张雨绮更多猛料被扒出,放纵的代价太大

照亮你的前行之路
2026-01-28 00:22:21
A股:收盘后,传来一个信息,明天,周四或要这样走了!

A股:收盘后,传来一个信息,明天,周四或要这样走了!

明心
2026-01-28 16:36:40
穆塞蒂伤退!德约科维奇被全面压制仍晋级,感叹:原本该是我回家

穆塞蒂伤退!德约科维奇被全面压制仍晋级,感叹:原本该是我回家

体育妞世界
2026-01-28 17:30:19
剖人心者终被食:乱世恶棍张彦泽的结局比电视上还惨

剖人心者终被食:乱世恶棍张彦泽的结局比电视上还惨

爱历史
2026-01-28 10:07:37
阚清子发文:在荆棘中寻找出路,在脆弱中生长力量

阚清子发文:在荆棘中寻找出路,在脆弱中生长力量

红星新闻
2026-01-28 12:57:30
2026-01-28 18:24:50
IT之家
IT之家
爱科技,爱这里 - 前沿科技人气平台
326983文章数 606918关注度
往期回顾 全部

科技要闻

它是神也是毒!Clawdbot改名卷入千万诈骗

头条要闻

男子姓"苟"怕女儿尴尬一起改姓"敬":没想到真的解决了

头条要闻

男子姓"苟"怕女儿尴尬一起改姓"敬":没想到真的解决了

体育要闻

库明加和科尔,一段不该有的事故!

娱乐要闻

王祖贤入驻某音:一条7秒视频吸粉55万

财经要闻

40倍杠杆断裂!水贝一黄金平台兑付困难

汽车要闻

新手必看!冰雪路面不敢开?记住这4点 关键时刻真能保命

态度原创

教育
时尚
亲子
房产
公开课

教育要闻

奥数几何,等高模型!

被章若楠、舒淇带火的毛衣,这样穿太时髦了!

亲子要闻

3岁小男孩手指被压碎,仅是两秒钟的不注意,父亲却可能愧疚一生

房产要闻

实景兑现在即!绿城,在海棠湾重新定义终极旅居想象!

公开课

李玫瑾:为什么性格比能力更重要?

无障碍浏览 进入关怀版