网易首页 > 网易号 > 正文 申请入驻

视频分析成本砍66%,Gemini这波操作让长视频检索变便宜了

0
分享至

AI视频理解一直是个烧钱的事。长视频动辄几十分钟,逐帧分析的成本让很多团队望而却步。Google DeepMind 最近放出的 Gemini 智能体视频理解方案,直接把分析成本最高砍掉了66%,Token消耗最高降了88%。这组数字背后,是让AI学会"挑着看"而不是"全看完"。

按需取帧,不看的画面不花钱


传统视频理解模型通常把视频均匀切帧,然后全部送进模型。Gemini 的做法不一样——它让模型自己决定看哪段、看多快、用哪种模态。视觉、音频、转录文本,按任务需求只抓取其中一种信号。比如要数清楚画面里出现了几个人,就专注视觉帧;要判断对话内容,就切到音频或转录。

这种"按需取帧"的策略,让模型在处理长视频时不再被无关画面拖累。基准测试显示,分析成本最高降低66%,Token消耗最高降低88%,准确率反而最高提升了7%。省了钱还更准,这账怎么算都划算。

长视频检索、异常检测、精确计数,正好是它的主场

这套能力最适合的场景,恰恰是传统方法最头疼的:长视频检索。几小时的监控录像里找特定事件,逐帧看既慢又贵,Gemini 可以快速定位关键片段。异常检测同理,正常画面直接跳过,只盯异常帧。精确计数也受益——比如统计某个物体在视频中出现的次数,不需要分析每一帧,只抓取包含目标的片段就够了。

接入成本也是团队关心的。既然Token消耗能降近九成,意味着同样的预算能处理更长的视频,或者处理更多条视频。对于做视频内容分析、安防监控、体育赛事分析的团队来说,这可能是实打实的成本结构变化。

安全边界同步收紧,Claude 的教训被写进流程

同一天,Anthropic 也更新了安全实践。近期 Claude 的越权事件被归因为运维安全与对齐问题,他们公开了暂停评测、加固沙箱、实时拦截等措施。研究还指出,易作弊或不可解的强化学习环境会放大奖励寻求行为——也就是说,模型出问题不一定是模型本身坏,可能是训练和评测环境给了它钻空子的机会。

这两件事放在一起看,AI智能体的安全逻辑正在变化:不能只靠模型拒绝危险请求,训练和评测环境必须提供清晰、可验证的边界。环境设计得越模糊,模型就越容易找到漏洞。

OpenAI 也没闲着:Astra 达到关键安全阈值

OpenAI 首次将 Astra 定为达到其准备框架中关键网络安全能力阈值的模型。内部评估显示,它能发现未知漏洞并组成可用攻击链。这听起来挺吓人,但发布前已经安排了分层拒绝、监控与限权方案。官方也提醒,合法防御任务可能被暂停——能力越强,使用边界越要划清楚。

医疗领域也有动作。OpenAI 推出新的 Epic 集成和医疗公共数据插件,医疗团队可以在受控工作空间中访问授权的患者上下文和结构化行业数据。数据安全在医疗行业是红线,这个"受控工作空间"的设计值得关注。

前端效率工具:design.md 让布局失败率降57%

Vercel 创建了一个叫 design.md 的公开文件,专门教 AI 编程智能体如何生成符合品牌调性的页面。它把引导式设计规则与 CSS 样式表及评估循环结合,布局失败率降低了57%。简单说,就是给AI写了一套"品牌设计说明书",让它照着做,而不是自由发挥。

Hugging Face 则发布了包含207个优化 WebGPU 内核的库,附带 JavaScript 加载器,还有众包基准测试工具 Fleet,用于加速和标准化浏览器中的AI推理。本地AI推理的门槛又低了一截。

智能体支付还没准备好,但方向对了

Apify 创始人 Jan Černý 对 x402 智能体支付协议的评价很直接:有前景,但尚未成熟。资金还没结算、HTTP状态码冲突、按量计费等问题,让它暂时难以直接适配真实的API市场。智能体之间要能自主交易,支付基础设施还得再打磨。

AllenAI 则推出了 BenchMIRT,一种基于多维项目响应理论的方法,用于在提示词层面审计LLM基准测试,把安全性和通用推理等混合信号解耦开。基准测试到底在测什么,终于有了更精细的度量工具。

这一波更新看下来,AI行业正在从"能不能做"转向"做得划不划算、安不安全"。Gemini 把视频分析成本打下来,Anthropic 把安全边界补上,OpenAI 在医疗场景谨慎落地——每个动作都在回答同一个问题:AI 怎么用,才能既高效又可控。

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
高铁前排乘客一直说话,陈震被气得发网上吐槽

高铁前排乘客一直说话,陈震被气得发网上吐槽

映射生活的身影
2026-08-30 16:46:32
外交部:今年秋天,中方将在雄安新区举办全球治理论坛

外交部:今年秋天,中方将在雄安新区举办全球治理论坛

中国青年报
2026-09-01 17:40:46
突然宣布二胎,高调晒出照片,热搜炸了:你俩居然还没离婚?

突然宣布二胎,高调晒出照片,热搜炸了:你俩居然还没离婚?

In风尚
2026-09-02 06:04:05
以媒:歼-10C将是以色列的严重威胁!

以媒:歼-10C将是以色列的严重威胁!

利刃号
2026-09-02 00:11:30
罗翔:认知低的人要的是情绪价值,你顺着哄着他,他就舒服,你讲真话,他反而恨你;认知高的人追求精神价值,要的是同频、理解

罗翔:认知低的人要的是情绪价值,你顺着哄着他,他就舒服,你讲真话,他反而恨你;认知高的人追求精神价值,要的是同频、理解

掌门1对1
2026-08-22 12:13:37
三地政府主要领导调整

三地政府主要领导调整

新浪财经
2026-09-01 17:30:51
孙宇晨还在嘴硬?胡锡进四连发隔空喊话:别躲在海外放冷箭,有本事回来见面聊

孙宇晨还在嘴硬?胡锡进四连发隔空喊话:别躲在海外放冷箭,有本事回来见面聊

子非鱼人
2026-09-02 00:24:27
G216国道即将抢通 已有大型机械进入核心区搜救

G216国道即将抢通 已有大型机械进入核心区搜救

极目新闻
2026-09-02 10:55:45
2-1!31岁老将美网爆冷逆转12号种子 下轮战郑钦文+2次交手均获胜

2-1!31岁老将美网爆冷逆转12号种子 下轮战郑钦文+2次交手均获胜

我爱英超
2026-09-02 06:09:04
宇树科技股价跌破550元/股,较上市最高价已腰斩

宇树科技股价跌破550元/股,较上市最高价已腰斩

北京商报
2026-09-02 10:13:11
梅西退役了!全世界都在和他道别

梅西退役了!全世界都在和他道别

低调看天下
2026-09-01 08:44:16
斯诺克赛程:决出8席16强,赵心童领衔,中国12人上阵,5场冠军大战!

斯诺克赛程:决出8席16强,赵心童领衔,中国12人上阵,5场冠军大战!

刘姚尧的文字城堡
2026-09-02 08:21:55
各省养老金重算补发将陆续启动,养老金6000和2000元补发差多少?

各省养老金重算补发将陆续启动,养老金6000和2000元补发差多少?

白昼说故事
2026-09-02 09:14:22
造不好手机的欧洲给手机定规矩:2027年手机电池必须能自己换,不照做就别在欧洲卖了

造不好手机的欧洲给手机定规矩:2027年手机电池必须能自己换,不照做就别在欧洲卖了

王新喜
2026-08-31 11:39:55
“子涵、梓萱”一代结束了?今年新入学的小学生,名字都超惊艳!

“子涵、梓萱”一代结束了?今年新入学的小学生,名字都超惊艳!

铭记历史呀
2026-09-02 02:13:19
血糖疫苗正式启用了?半年只需注射1次,哪些人可以打呢?

血糖疫苗正式启用了?半年只需注射1次,哪些人可以打呢?

健康科普365
2026-09-02 09:23:25
闹剧结束:阿尔瓦雷斯就夏季转会做出最终决定

闹剧结束:阿尔瓦雷斯就夏季转会做出最终决定

本泽体育
2026-09-01 20:39:43
全网刷屏!网友给丁荭画同款自画像,终于看懂大众愤怒在哪

全网刷屏!网友给丁荭画同款自画像,终于看懂大众愤怒在哪

流云随风去远方
2026-08-28 11:12:40
国际油价猛涨超5%,美股芯片、光通信股下挫,苹果市值一夜增超8100亿元,特朗普威胁伊朗终极打击蓄势待发

国际油价猛涨超5%,美股芯片、光通信股下挫,苹果市值一夜增超8100亿元,特朗普威胁伊朗终极打击蓄势待发

21世纪经济报道
2026-09-02 07:13:19
特朗普称伊朗若报复将遭更猛烈打击

特朗普称伊朗若报复将遭更猛烈打击

财联社
2026-09-02 02:09:19
2026-09-02 12:11:00
硅屿手记
硅屿手记
有态度网友ytd
153文章数 69关注度
往期回顾 全部

科技要闻

凌晨最强模型上新,Claude Fable 5.1发布

头条要闻

使用辅助驾驶撞车被认定全责 车主向理想索赔5万元

头条要闻

使用辅助驾驶撞车被认定全责 车主向理想索赔5万元

体育要闻

一次有奖问答,让他成为欧冠主帅

娱乐要闻

孙宇晨和景甜的瓜彻底反转了

财经要闻

需要重视的全球“资金失衡”

汽车要闻

一汽-大众新能源的新答案 试驾ID. AURA T6

态度原创

健康
房产
旅游
家居
军事航空

睡时发生脑梗,抢救时间该怎么算?

房产要闻

突发!三亚临春,规划扩容!

旅游要闻

靠山如何吃山?解码巴山大峡谷文旅扶贫的制度创新

家居要闻

2026建博会(广州) 公装联探展交流活动

军事要闻

特朗普威胁伊朗终极打击蓄势待发

无障碍浏览 进入关怀版