网易首页 > 网易号 > 正文 申请入驻

AI时代视频压缩逻辑生变,“玲珑”VPU要让机器“看懂”世界

0
分享至

“在AI时代,不光多了很多给人看的视频,比如AI短剧,还多了很多给机器看的视频。如何让这些硅基生命更好地理解人类社会?”对于这一问题,安谋科技VPU研发总监黄鑫博士在WAIC 2026安谋科技展台以《AI VPU:开启视频压缩新篇章》为题,试图从“面向机器的视频压缩”这一维度给出安谋科技的答案。


视频角色的嬗变:从为人眼服务,到为AI服务

黄鑫首先厘清了一个产业背景的根本性转变。传统视频压缩技术,主要解决的是手机存储、朋友圈传输这类问题,衡量的标准是“人眼主观视觉上有没有瑕疵”,一切为人的观看体验服务。但随着AI应用与视频的结合日趋紧密,视频的角色正在发生根本性变化。

一方面,AI成为视频的“生产者和加工者”——AIGC生成视频内容已是常态。另一方面,在更广泛的应用场景中,AI正在变成视频的“消费者”。黄鑫列举了一连串常见的案例:人形机器人、机器狗、自动驾驶以及各类视觉单元的感知模块——这些系统需要用海量视频数据进行推理和训练。视频,由此成为连接物理世界与虚拟世界的核心桥梁。


这一角色转变带来了一项硬约束:视频质量对AI推理和训练精度的影响是决定性的。“如果视频本身有损,对整个AI推理精度、训练精度会产生非常大的影响。”黄鑫强调,数据本身的受损,将波及整个产业布局和降本增效的进程。因此,VPU的设计理念必须随之改变——从为人眼主观视觉服务,转向为机器视觉服务。“AI打开了面向机器的视频压缩新维度。”他总结道。

从“峨眉”到“武当”,嵌入内容感知编码

面对这一产业变局,玲珑VPU的技术演进路线清晰而坚定。黄鑫在回顾了今年初发布的“峨眉”VPU的同时,还首次透露了明年年初即将发布的下一代产品——“武当”VPU。这两款产品最大的共同特点是:集成了轻量化AI算子,具备了“内容感知编码”(Content-Aware Encoding, CAE)能力。

所谓内容感知编码,其核心逻辑是将视频内容解析为两个层次:第一层做浅层的图像纹理处理,第二层做深度的语义解析。这两层信息被同时注入编码器,为编码决策提供智能化的依据。


黄鑫展示的框架显示,CAE模块处于视频编码单元的第一级,在搬运数据的同时完成上述两层处理,再将数据传输给下一级的编码决策模块。在航拍、游戏、监控等不同场景下,该技术均能实现可观的码率节省。

作为“峨眉”之后的又一力作,“武当”在继承智能感知编码技术的基础上,实现了三个维度的显著提升:

PPA层面,“武当”可支持8K 30fps的编码能力,足以满足各类AI应用对性能的需求,同时面积上相较前代有40%的节省。


规格层面,“武当”新增了对YUV 422编码格式的支持,这对专业摄像拍摄场景是一大利好;同时支持Raw Data压缩,可省去轻度转换环节,更好地服务于AI训练流程;此外还支持高达1Gbps的码率,能够满足人形机器人等Physical AI应用场景的大带宽需求。

编码质量层面,全面继承“峨眉”的基础上,“武当”实现了额外提升。黄鑫特别指出,其灵活可配置的特性让用户可选择不同档次,目前版本已可与软件最高档水准持平;而在服务AI应用场景中,面对不规则运动等复杂画面,“武当”还有额外5%到10%的编码质量提升。

下一代愿景:从局部最优走向端到端全局最优

“峨眉”和“武当”是服务当下,但技术演进并未止步。黄鑫透露,团队在研项目中已经开始布局下一代的端到端视频编码技术,总体方向有两条:一是从智能CAE的局部优化拓展到端到端的全局最优;二是从以人眼主观视觉为主的编码优化,拓展到面向不同AI应用的定向优化。


黄鑫展示了正在落地的技术框架。训练阶段,系统引入前置网络,结合虚拟编码器和特定AI应用,通过联合训练实现针对特定任务的最优优化结果。部署阶段,前置网络经优化后与玲珑VPU编码器直接耦合,形成真正意义上“任务感知”的编码器,最终实现压缩效率与任务精度的最佳平衡。


黄鑫展示的对比效果显示,目前该框架在目标追踪和动作识别两项任务上,均已取得10%以上的编码质量提升。传统方法处理后的画面与经过AI VPU算法处理后的画面,在人眼看来或许差异不大,但对机器而言,后者的可辨识度和友好度明显更优——精度提升的同时,码率也得到节省。


安谋科技的VPU团队的野心不止于此。据黄鑫介绍,下一步计划是将AI VPU训练框架进行泛化,引入前置网络和后置网络,通过多模态参数配置,最终实现人眼主观视觉与AI特定任务的双向提升——既让人看得舒服,也让机器看得明白。


“如何让硅基生命拥有和人一样的清晰视野?”回到最初的提问,黄鑫给出了自己的答案:“玲珑VPU作为AI视觉的引擎,可以让人类看清世界,让AI看懂世界。”

编辑:芯智讯-浪客剑

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
实探鸿蒙智行门店:仍在销售问界车型,但面临“二选一”抉择,销售人员称“赛力斯渠道独立是为推轿车、MPV做准备”

实探鸿蒙智行门店:仍在销售问界车型,但面临“二选一”抉择,销售人员称“赛力斯渠道独立是为推轿车、MPV做准备”

每日经济新闻
2026-09-18 22:06:23
中国神秘巨舰再曝关键结构,12根立柱现身,真是无人潜艇母舰?

中国神秘巨舰再曝关键结构,12根立柱现身,真是无人潜艇母舰?

念得小柔
2026-09-17 19:07:37
返聘被降薪1万,老医生日子也不好过?年轻医生:退了还返聘,难怪年轻人找不到工作?返聘主任:要有大局观念,我每年都给年轻医生发红包

返聘被降薪1万,老医生日子也不好过?年轻医生:退了还返聘,难怪年轻人找不到工作?返聘主任:要有大局观念,我每年都给年轻医生发红包

梅斯医学
2026-09-18 07:53:54
英国为何深陷分裂危机与战略迷思?

英国为何深陷分裂危机与战略迷思?

风铃草语
2026-09-18 06:58:44
敬一丹当天在哈尔滨开颅手术,包ICU专机回京

敬一丹当天在哈尔滨开颅手术,包ICU专机回京

雪中风车
2026-09-16 15:23:29
大家发现没,王楚钦越来越不对劲,不是球技断崖下滑,也不是长相变化,而是精气神肉眼可见地被透支

大家发现没,王楚钦越来越不对劲,不是球技断崖下滑,也不是长相变化,而是精气神肉眼可见地被透支

乒乓助手
2026-08-21 00:37:44
全球集体加息,唯独中国逆势放水!新一轮财富洗牌已经开始

全球集体加息,唯独中国逆势放水!新一轮财富洗牌已经开始

白米饭怎么吃
2026-09-18 21:00:56
严肃警告:不要买!不要吃!里面含有硼砂,危害健康,别害了自己

严肃警告:不要买!不要吃!里面含有硼砂,危害健康,别害了自己

侯医生谈健康
2026-09-11 02:55:03
日本侵华长达14年,一共派来了多少日军,死了多少人?说了你可能不信

日本侵华长达14年,一共派来了多少日军,死了多少人?说了你可能不信

迷彩前沿
2026-09-01 15:57:13
突然宣布二胎,高调晒出照片,热搜炸了:你俩居然还没离婚?

突然宣布二胎,高调晒出照片,热搜炸了:你俩居然还没离婚?

LULU生活家
2026-08-28 20:08:31
世体:姆巴佩两年无冠,金球给他的话会是世界足坛最大的丑闻

世体:姆巴佩两年无冠,金球给他的话会是世界足坛最大的丑闻

懂球帝
2026-09-18 15:28:17
问界要从华为店里撤了:不是“分手”,是华为把最肥的课,教给赛力斯自己上

问界要从华为店里撤了:不是“分手”,是华为把最肥的课,教给赛力斯自己上

狠人搞钱
2026-09-18 08:06:06
该说不说,于莎莎的外形条件确实不错,难怪被称娱乐圈第一美脚!

该说不说,于莎莎的外形条件确实不错,难怪被称娱乐圈第一美脚!

阿废冷眼观察所
2026-09-17 09:05:49
网传未来14年平均每天6万人退休,网友担心社保能否负担得起钱?

网传未来14年平均每天6万人退休,网友担心社保能否负担得起钱?

慧翔百科
2026-09-17 16:51:06
好消息,各地将陆续开启养老金重算补发,补发10个月补发多少钱?

好消息,各地将陆续开启养老金重算补发,补发10个月补发多少钱?

三石记
2026-09-18 12:12:44
阿莫林米兰首败后谈曼联:红黑军团球员素质更契合我的战术

阿莫林米兰首败后谈曼联:红黑军团球员素质更契合我的战术

星耀国际足坛
2026-09-18 23:42:12
宇宙早期的"小红点"到底是什么?新研究给出一个答案

宇宙早期的"小红点"到底是什么?新研究给出一个答案

硬核实验室哦
2026-09-17 23:19:03
数据显示,超15%的中青年夫妻处于“干婚”状态,68%的中年人拥有固定深交的异性网友

数据显示,超15%的中青年夫妻处于“干婚”状态,68%的中年人拥有固定深交的异性网友

舒山有鹿
2026-07-25 09:57:20
好莱坞史上最长的电影:30部片子,29部三个小时起步,4部越过四小时

好莱坞史上最长的电影:30部片子,29部三个小时起步,4部越过四小时

胶片猴
2026-09-17 23:47:54
纯电续航1100km!比亚迪新车官宣:9月23日正式上市

纯电续航1100km!比亚迪新车官宣:9月23日正式上市

科技阿维
2026-09-18 13:53:15
2026-09-19 00:40:49
芯智讯 incentive-icons
芯智讯
聚焦科技万象,报道前沿资讯。
9392文章数 32140关注度
往期回顾 全部

科技要闻

直击iPhone 18新机发售:黄牛加价不如前代

头条要闻

俄杜马选举拉夫罗夫"意外"登顶名单 梅德韦杰夫被拿下

头条要闻

俄杜马选举拉夫罗夫"意外"登顶名单 梅德韦杰夫被拿下

体育要闻

好吧,中国男篮辛苦了

娱乐要闻

陈思诚 佟丽娅不想让儿子知道两人离婚

财经要闻

研发0.25亿理财26亿,敷尔佳豪赌三类器械

汽车要闻

纯电/插混双动力+五座/六座双布局 海狮08应该怎么选?

态度原创

教育
房产
家居
公开课
军事航空

教育要闻

注意:今日开始,推免系统开放注册!

房产要闻

海口房价,降不动了!

家居要闻

2026建博会(广州) 公装联探展交流活动

公开课

李玫瑾:为什么性格比能力更重要?

军事要闻

中方反对在安理会强推恢复对伊朗制裁

无障碍浏览 进入关怀版