网易首页 > 网易号 > 正文 申请入驻

视频分析成本砍66%,谷歌新功能让AI学会“挑着看”

0
分享至

谷歌今天给开发者送了个大礼包。在最新的 Gemini 3.7 Flash、3.6 Flash 和 3.5 Flash-Lite 模型中,一项名为“智能体视频理解”的新功能正式上线。它的核心卖点很直接:让 AI 看视频时不再“傻看”,而是学会“挑着看”——结果就是分析成本最高降 66%,Token 消耗最高降 88%,准确率还能提升最高 7%。

这组数字放在长视频场景里尤其诱人。过去开发者处理几小时的视频素材,往往要在“烧掉海量 Token”和“漏掉关键细节”之间做痛苦取舍。现在,谷歌给出的方案是让模型自己决定该看什么、看多快、用哪种方式看。


从“逐帧扫”到“按需看”

传统静态处理方式很简单粗暴:模型按固定帧率读取视频,默认每秒 1 帧,开发者可以通过 API 调整。这种方式的问题在于,不管视频里有没有重要内容,模型都得从头到尾“扫”一遍,Token 消耗自然居高不下。

智能体视频理解则完全不同。它把模型的核心推理能力与原生视频工具结合起来,让 Gemini 能在视觉帧、音频和转录文本中动态搜索、扫描和检查目标片段。换句话说,模型不再被动接收所有画面,而是主动、有目标地决定:哪些内容值得看、以什么速度看、通过哪种模态获取信息——帧、音频还是转录文本。

这种“按需取用”的逻辑,只提取所需的片段和信号。以前这些精细操作全靠开发者手动完成,现在 Gemini 通过智能循环自动搞定,开发工作量大幅缩减。

四个新能力,专治长视频痛点

谷歌为这项功能总结了四个典型应用场景,每一个都直指长视频处理的传统痛点:

  • 亚秒级时刻检索:精准定位在 1 FPS 下容易错过的瞬间状态变化和紧凑剪辑边界,高精度自动化视频编辑成为可能。
  • 长视频“大海捞针”搜索:在长达数小时的视频中回答复杂查询,无需消耗数百万 Token。
  • 异常检测:对感兴趣的时间窗口以更高帧率重新采样,快速捕捉快速运动和细微视觉伪影。
  • 动作与物体计数:随时间精准追踪重复的物理动作和不同物体。

谷歌特别提到,Gemini 3.7 Flash 搭配智能体视频理解能实现最佳整体质量,在质量与成本效率间达到最优平衡,处于视频理解任务中准确率与成本的帕累托最优前沿。

上线即用,价格不额外加收

对开发者来说,最友好的部分在于接入成本。该功能使用标准 Gemini API Token 定价,不收取额外功能费用。目前已在 Google AI Studio 和 Gemini Enterprise Agent Platform 的 Gemini API 中上线,支持视频上传和 YouTube 视频分析。开发者只需在 API 配置中将处理模式设置为“agentic”即可启用。

谷歌的野心不止于开发者。这项能力很快会推向更多面向普通用户的产品:Gemini 应用中所有 Flash 和 Flash-Lite 模型用户即将获得该功能;未来几个月内,它还将为 YouTube 视频观看页的“Ask YouTube”功能提供支持,借助 Gemini 给出基于视频画面的更高质量回答。

从“静态扫帧”到“智能体式检索”,谷歌这次把视频理解的效率天花板又抬高了一截。对于每天和长视频数据打交道的团队来说,这可能是近期最值得试一次的新工具。

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
塔利班治下的阿富汗  仿佛坠入中世纪般的处境

塔利班治下的阿富汗 仿佛坠入中世纪般的处境

那些看得见的老照片
2026-08-24 07:00:27
绕道3000公里赴上合峰会,莫迪没意识到问题,还当面"教训"普京

绕道3000公里赴上合峰会,莫迪没意识到问题,还当面"教训"普京

林子说事
2026-09-03 01:56:55
日网民气炸,高市强烈抗议,普京说“不惊讶,日本负全责”

日网民气炸,高市强烈抗议,普京说“不惊讶,日本负全责”

这里是东京
2026-09-02 18:01:01
事态升级!伊朗总统参会还没返程,亲儿子就要被革命卫队治罪了

事态升级!伊朗总统参会还没返程,亲儿子就要被革命卫队治罪了

铁锤简科
2026-09-02 17:20:10
王菲男闺蜜事件2天后,谢霆锋高调现身青岛,满脸沧桑,老了许多

王菲男闺蜜事件2天后,谢霆锋高调现身青岛,满脸沧桑,老了许多

乡野小珥
2026-09-03 00:27:47
佩斯科夫表示,为了和平,乌克兰应该将顿巴斯交给俄罗斯

佩斯科夫表示,为了和平,乌克兰应该将顿巴斯交给俄罗斯

山河路口
2026-08-31 23:37:50
无知真会害人!云南一父亲帮上大学的女儿改造宿舍,用棉线缠床栏杆和爬梯,引发争议

无知真会害人!云南一父亲帮上大学的女儿改造宿舍,用棉线缠床栏杆和爬梯,引发争议

火山詩话
2026-09-02 06:46:43
央视痛批:电动车解限速!可跑不快的25km/h,谁能替骑车人说句话

央视痛批:电动车解限速!可跑不快的25km/h,谁能替骑车人说句话

匹夫来搞笑
2026-09-03 01:39:27
中国女篮突传坏消息,王牌后卫90度崴脚不乐观,宫鲁鸣面临四大难题

中国女篮突传坏消息,王牌后卫90度崴脚不乐观,宫鲁鸣面临四大难题

南海浪花
2026-09-02 10:48:37
企退3千、事退7千!养老金双标藏不住了,5项改革彻底翻盘

企退3千、事退7千!养老金双标藏不住了,5项改革彻底翻盘

你在偷看谁
2026-08-16 21:28:58
李镇全:虽然我们是年轻的球队,但不能一直在低谷中爬不起来

李镇全:虽然我们是年轻的球队,但不能一直在低谷中爬不起来

懂球帝
2026-09-03 00:06:08
武汉警方通报:出动100余名警力,已刑拘81人

武汉警方通报:出动100余名警力,已刑拘81人

扬子晚报
2026-09-01 22:31:09
广东佛山一工厂发生火灾,夜幕中火光冲天,火势迅猛,当地消防:火已灭,未收到人员伤亡信息,原因还在调查

广东佛山一工厂发生火灾,夜幕中火光冲天,火势迅猛,当地消防:火已灭,未收到人员伤亡信息,原因还在调查

潇湘晨报
2026-09-02 12:01:08
真的很神奇,毛主席24岁给自己取的笔名,竟会和中国历史如此巧合

真的很神奇,毛主席24岁给自己取的笔名,竟会和中国历史如此巧合

纪史行者
2026-09-02 01:40:04
1987年,朝鲜女特工引爆客机,自称黑龙江人,却因一个地名露出破绽

1987年,朝鲜女特工引爆客机,自称黑龙江人,却因一个地名露出破绽

翠羽
2026-09-01 10:55:14
变脸,从宠儿到弃儿只要一年,被阿森纳嫌弃还是示爱巴萨遭惩罚

变脸,从宠儿到弃儿只要一年,被阿森纳嫌弃还是示爱巴萨遭惩罚

95帕尔马
2026-09-02 17:18:07
孔绍逊任甘肃省代省长,任振鹤因工作变动辞去省长职务

孔绍逊任甘肃省代省长,任振鹤因工作变动辞去省长职务

观察者网
2026-09-02 16:00:09
饺子导演提到《哪吒3》满脸绝望,只因上一部埋了太多“坑”

饺子导演提到《哪吒3》满脸绝望,只因上一部埋了太多“坑”

阿废冷眼观察所
2026-08-28 02:43:56
天涯老帖分享:低收入人群该怎样积累财富,网友:还好还能刷到!

天涯老帖分享:低收入人群该怎样积累财富,网友:还好还能刷到!

另子维爱读史
2026-08-25 19:59:13
男子因左肩酸痛就诊,上午入院,下午死亡!医生:因忽视3件事!

男子因左肩酸痛就诊,上午入院,下午死亡!医生:因忽视3件事!

小胡军事爱好
2026-08-26 10:26:16
2026-09-03 03:19:00
我是一个粉刷匠2
我是一个粉刷匠2
有态度网友ytd
188文章数 165关注度
往期回顾 全部

科技要闻

凌晨最强模型上新,Claude Fable 5.1发布

头条要闻

游客拍下疑冰崩画面:土石翻涌 山间有黑色物体涌出

头条要闻

游客拍下疑冰崩画面:土石翻涌 山间有黑色物体涌出

体育要闻

一次有奖问答,让他成为欧冠主帅

娱乐要闻

香港武打影星陈观泰离世,终年80岁

财经要闻

星宇股份的麻烦,才刚开始

汽车要闻

配双腔空悬+机械差速锁 传祺越7预售权益价17.18万起

态度原创

健康
艺术
本地
数码
公开课

越吃越爆痘?医生讲清7大真相

艺术要闻

杨超越的汉服只能排第二?这位神秘女子一出现,整个汉服圈都炸了!

本地新闻

昆明的雨,解锁汪曾祺的浪漫雨季

数码要闻

戴森发布首款口腔护理科技CameraJet可视成像牙刷

公开课

李玫瑾:为什么性格比能力更重要?

无障碍浏览 进入关怀版