网易首页 > 网易号 > 正文 申请入驻

视频分析成本砍88%,Gemini新功能让AI自己找重点

0
分享至

一段90分钟的讲座视频,过去AI分析要烧掉大量算力,现在成本能砍掉近九成。Google DeepMind在2026年9月1日发布了Gemini的「Agentic Video Understanding」功能,让AI不再傻乎乎地把整段视频从头到尾读一遍,而是像人一样,先听问题,再带着目的去视频里找答案。

这个功能目前已经在Gemini 3.7 Flash、Gemini 3.6 Flash和Gemini 3.5 Flash-Lite上开放使用。核心变化在于,AI从「被动接收」变成了「主动侦查」——它会根据你的提问,自己决定该看视频的哪一段、该用多高的清晰度去看。


传统方式为什么又贵又笨?


过去Gemini处理视频用的是「静态处理」:不管视频多长,统一按每秒1帧的速率抽帧,然后把所有画面和音频一股脑塞给模型。这个方法对付短视频还行,但遇到几十分钟甚至几小时的素材就麻烦了——要么消耗大量token,要么为了省成本降低帧率,结果把一闪而过的关键画面漏掉了。

Agentic Video Understanding的思路完全不同。它让Gemini先理解问题,再反过来决定「我需要看视频的哪个部分」。如果某个区间的信息不够,它还能主动调整那个区间的帧率和分辨率,重新看一遍。处理资源不再平均分配,而是集中火力在真正需要的地方。

能干什么?从数拍手到找剪辑点

Google官方举了几个典型场景,每一个都踩在传统方案的痛点上:

  • 数动作次数:比如数一段视频里拍了多少次手。快速动作在1FPS的静态处理下很容易被漏掉或混淆,新功能可以自动提高帧率重新确认。
  • 找剪辑点:定位视频编辑中剪切的位置,这类瞬间变化往往只有几帧。
  • 长视频搜索:在数小时的录像里找某个特定事件,不用从头到尾全看一遍。
  • 异常检测:先低帧率扫一遍,发现异常区间再提高帧率细看。

Google给出的测试数据显示,相比传统静态处理,Agentic Video Understanding能把token消耗最多降低88%,同时精度最高提升约7%。在10分钟的解说视频、90分钟的讲座这类中长视频上,效率改善尤其明显。

成本与精度的「帕累托前沿」

在专门测试长视频理解能力的「1H-VideoQA」基准上,Google对比了单次查询的成本和精度。结果启用Agentic Video Understanding的Gemini 3.7 Flash,在所有被测模型中处于「帕累托前沿」——简单说,就是没有其他模型能在同等成本下做到更高精度,或在同等精度下做到更低成本。整体分析成本最多可削减66%


这个结果并不意外。过去处理长视频,大量token浪费在无关画面上;现在AI只盯着关键区间看,省下的算力自然可观。

怎么用?API指定一下就行

开发者想用这个功能很简单:在Gemini API里把视频处理方式指定为「agentic」即可。目前Google AI Studio和Gemini Enterprise Agent Platform已经支持,上传的视频和公开的YouTube视频都能分析。功能本身不额外收费,只按正常的Gemini API token价格计费。

如果你处理的是5分钟以内的短视频、更看重响应速度,Google也保留了传统的静态处理模式,开发者可以根据场景自行选择。

下一步:进入Gemini应用和YouTube

Google不打算把这个能力锁在API里。官方计划在近期把Agentic Video Understanding带到Gemini应用的Flash和Flash-Lite版本中。另外,几个月内还会集成到YouTube视频观看页面的「Ask YouTube」功能里,让用户直接对着视频提问时,AI能给出更靠谱的回答。

从「AI看视频」到「AI知道该看哪里」,这个转变听起来不大,但对长视频分析的成本结构来说,是一次实打实的改变。对于经常处理会议录像、课程回放、监控素材的团队,这个功能值得第一时间试试。

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
孙宇晨想靠近谷爱凌无从下手:不是他不行,是她的圈子自带防火墙

孙宇晨想靠近谷爱凌无从下手:不是他不行,是她的圈子自带防火墙

小椰的奶奶
2026-09-02 01:08:15
1-2被逆转!奥运冠军爆冷出局,遭遇美网一轮游,郑钦文对手出炉

1-2被逆转!奥运冠军爆冷出局,遭遇美网一轮游,郑钦文对手出炉

侃球熊弟
2026-09-02 07:41:10
三天内第二轮袭击,特朗普威胁伊朗终极打击蓄势待发,伊方誓言报复

三天内第二轮袭击,特朗普威胁伊朗终极打击蓄势待发,伊方誓言报复

上观新闻
2026-09-02 06:21:38
北京女子状告开发商,赢下2600万元官司,200万元律师费仅付30万后失联遭律所起诉,代理人:律师费过高

北京女子状告开发商,赢下2600万元官司,200万元律师费仅付30万后失联遭律所起诉,代理人:律师费过高

极目新闻
2026-09-02 09:10:08
每人1000元!江苏明确了!

每人1000元!江苏明确了!

江南晚报
2026-09-01 21:43:00
美网爆出大冷门!首位女单TOP20种子出局,郑钦文次轮对手确定

美网爆出大冷门!首位女单TOP20种子出局,郑钦文次轮对手确定

全景体育V
2026-09-02 06:06:23
胡锡进回复孙割的公开信火了!引来全网一片叫好,尤其是最后一句

胡锡进回复孙割的公开信火了!引来全网一片叫好,尤其是最后一句

爱写的樱桃
2026-09-02 07:05:03
突发!切尔西5500万欧压哨引援告吹 法甲队达协议后毁约 蓝军愤怒

突发!切尔西5500万欧压哨引援告吹 法甲队达协议后毁约 蓝军愤怒

我爱英超
2026-09-02 06:27:29
太难选择了!成都27岁女生相亲陷入两难:要生理性喜欢,还是要2000万家底

太难选择了!成都27岁女生相亲陷入两难:要生理性喜欢,还是要2000万家底

火山詩话
2026-09-01 07:05:33
58岁那英演唱会变“胸透秀”,上万票价观众听半场就跑

58岁那英演唱会变“胸透秀”,上万票价观众听半场就跑

草莓解说体育
2026-09-01 09:34:02
星宇股份事件舆论升级!常州人自己说:护不住星宇了,支持一家企业前,要看它对年轻人干了什么

星宇股份事件舆论升级!常州人自己说:护不住星宇了,支持一家企业前,要看它对年轻人干了什么

火山詩话
2026-09-01 10:57:59
一句“中国台湾”,台当局为何急了?

一句“中国台湾”,台当局为何急了?

以色列飛飛
2026-09-01 18:25:45
外媒:看完中国战斗机,埃及要增购24架“阵风”战斗机,为什么没买中国战斗机?

外媒:看完中国战斗机,埃及要增购24架“阵风”战斗机,为什么没买中国战斗机?

蓝星杂谈
2026-09-02 09:38:10
乱充才是电池杀手!实测:慢充为主的Model Y三年电池衰减达23%

乱充才是电池杀手!实测:慢充为主的Model Y三年电池衰减达23%

快科技
2026-09-01 17:49:02
南昌起义之后,如果听了贺龙的建议直奔湘鄂西,历史会改写吗?

南昌起义之后,如果听了贺龙的建议直奔湘鄂西,历史会改写吗?

纪史行者
2026-09-02 01:00:03
孙晨宇聊天记录被曝光,彻底颠覆挥金如土人设,写小作文动机被曝光人品碎了一地

孙晨宇聊天记录被曝光,彻底颠覆挥金如土人设,写小作文动机被曝光人品碎了一地

Mr王的饭后茶
2026-09-01 16:04:47
山西一地发生重大刑案,警方悬赏5万元捉拿光头男,知情人:他与受害女子相识,对方尚未脱离危险

山西一地发生重大刑案,警方悬赏5万元捉拿光头男,知情人:他与受害女子相识,对方尚未脱离危险

极目新闻
2026-09-02 11:36:16
28岁内地女主播诬告强奸在澳门被捕,因与男子发生性关系索2万港元未果

28岁内地女主播诬告强奸在澳门被捕,因与男子发生性关系索2万港元未果

可达鸭面面观
2026-08-31 13:50:36
刚刚,孙宇晨在 X 上发了一句简单的话:下一个小目标,1000 亿!

刚刚,孙宇晨在 X 上发了一句简单的话:下一个小目标,1000 亿!

火山詩话
2026-09-01 18:07:09
演员王侃在上海瑞金医院去世,享年66岁,他把全部家产全给了妻子

演员王侃在上海瑞金医院去世,享年66岁,他把全部家产全给了妻子

可乐谈情感
2026-09-02 00:03:07
2026-09-02 13:40:49
字节漫游指南
字节漫游指南
有态度网友ytd
173文章数 111关注度
往期回顾 全部

科技要闻

凌晨最强模型上新,Claude Fable 5.1发布

头条要闻

女孩9岁痛失双亲一路读到博士 每次升学都"刚好卡线"

头条要闻

女孩9岁痛失双亲一路读到博士 每次升学都"刚好卡线"

体育要闻

一次有奖问答,让他成为欧冠主帅

娱乐要闻

孙宇晨和景甜的瓜彻底反转了

财经要闻

需要重视的全球“资金失衡”

汽车要闻

连续5个月3万+ 小米汽车8月最新交付情况

态度原创

手机
教育
亲子
时尚
军事航空

手机要闻

Google公布9月Android更新:Gemini、消息应用和无障碍功能迎来多项改进

教育要闻

初一适应的好,初二照样崩!初二的5个潜规则越早知道越好

亲子要闻

跟妈妈和嫂子逛吃的一天,给小梅朵和格灵坤德挑了超好看的藏装~

夏天别总穿黑色裤子,试试这几款高腰裙,显瘦优雅又提气质

军事要闻

特朗普威胁伊朗终极打击蓄势待发

无障碍浏览 进入关怀版