网易首页 > 网易号 > 正文 申请入驻

AI时代视频压缩逻辑生变,“玲珑”VPU要让机器“看懂”世界

0
分享至

“在AI时代,不光多了很多给人看的视频,比如AI短剧,还多了很多给机器看的视频。如何让这些硅基生命更好地理解人类社会?”对于这一问题,安谋科技VPU研发总监黄鑫博士在WAIC 2026安谋科技展台以《AI VPU:开启视频压缩新篇章》为题,试图从“面向机器的视频压缩”这一维度给出安谋科技的答案。


视频角色的嬗变:从为人眼服务,到为AI服务

黄鑫首先厘清了一个产业背景的根本性转变。传统视频压缩技术,主要解决的是手机存储、朋友圈传输这类问题,衡量的标准是“人眼主观视觉上有没有瑕疵”,一切为人的观看体验服务。但随着AI应用与视频的结合日趋紧密,视频的角色正在发生根本性变化。

一方面,AI成为视频的“生产者和加工者”——AIGC生成视频内容已是常态。另一方面,在更广泛的应用场景中,AI正在变成视频的“消费者”。黄鑫列举了一连串常见的案例:人形机器人、机器狗、自动驾驶以及各类视觉单元的感知模块——这些系统需要用海量视频数据进行推理和训练。视频,由此成为连接物理世界与虚拟世界的核心桥梁。


这一角色转变带来了一项硬约束:视频质量对AI推理和训练精度的影响是决定性的。“如果视频本身有损,对整个AI推理精度、训练精度会产生非常大的影响。”黄鑫强调,数据本身的受损,将波及整个产业布局和降本增效的进程。因此,VPU的设计理念必须随之改变——从为人眼主观视觉服务,转向为机器视觉服务。“AI打开了面向机器的视频压缩新维度。”他总结道。

从“峨眉”到“武当”,嵌入内容感知编码

面对这一产业变局,玲珑VPU的技术演进路线清晰而坚定。黄鑫在回顾了今年初发布的“峨眉”VPU的同时,还首次透露了明年年初即将发布的下一代产品——“武当”VPU。这两款产品最大的共同特点是:集成了轻量化AI算子,具备了“内容感知编码”(Content-Aware Encoding, CAE)能力。

所谓内容感知编码,其核心逻辑是将视频内容解析为两个层次:第一层做浅层的图像纹理处理,第二层做深度的语义解析。这两层信息被同时注入编码器,为编码决策提供智能化的依据。


黄鑫展示的框架显示,CAE模块处于视频编码单元的第一级,在搬运数据的同时完成上述两层处理,再将数据传输给下一级的编码决策模块。在航拍、游戏、监控等不同场景下,该技术均能实现可观的码率节省。

作为“峨眉”之后的又一力作,“武当”在继承智能感知编码技术的基础上,实现了三个维度的显著提升:

PPA层面,“武当”可支持8K 30fps的编码能力,足以满足各类AI应用对性能的需求,同时面积上相较前代有40%的节省。


规格层面,“武当”新增了对YUV 422编码格式的支持,这对专业摄像拍摄场景是一大利好;同时支持Raw Data压缩,可省去轻度转换环节,更好地服务于AI训练流程;此外还支持高达1Gbps的码率,能够满足人形机器人等Physical AI应用场景的大带宽需求。

编码质量层面,全面继承“峨眉”的基础上,“武当”实现了额外提升。黄鑫特别指出,其灵活可配置的特性让用户可选择不同档次,目前版本已可与软件最高档水准持平;而在服务AI应用场景中,面对不规则运动等复杂画面,“武当”还有额外5%到10%的编码质量提升。

下一代愿景:从局部最优走向端到端全局最优

“峨眉”和“武当”是服务当下,但技术演进并未止步。黄鑫透露,团队在研项目中已经开始布局下一代的端到端视频编码技术,总体方向有两条:一是从智能CAE的局部优化拓展到端到端的全局最优;二是从以人眼主观视觉为主的编码优化,拓展到面向不同AI应用的定向优化。


黄鑫展示了正在落地的技术框架。训练阶段,系统引入前置网络,结合虚拟编码器和特定AI应用,通过联合训练实现针对特定任务的最优优化结果。部署阶段,前置网络经优化后与玲珑VPU编码器直接耦合,形成真正意义上“任务感知”的编码器,最终实现压缩效率与任务精度的最佳平衡。


黄鑫展示的对比效果显示,目前该框架在目标追踪和动作识别两项任务上,均已取得10%以上的编码质量提升。传统方法处理后的画面与经过AI VPU算法处理后的画面,在人眼看来或许差异不大,但对机器而言,后者的可辨识度和友好度明显更优——精度提升的同时,码率也得到节省。


安谋科技的VPU团队的野心不止于此。据黄鑫介绍,下一步计划是将AI VPU训练框架进行泛化,引入前置网络和后置网络,通过多模态参数配置,最终实现人眼主观视觉与AI特定任务的双向提升——既让人看得舒服,也让机器看得明白。


“如何让硅基生命拥有和人一样的清晰视野?”回到最初的提问,黄鑫给出了自己的答案:“玲珑VPU作为AI视觉的引擎,可以让人类看清世界,让AI看懂世界。”

编辑:芯智讯-浪客剑

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
天津最新放假通知:连休3天,不调休!

天津最新放假通知:连休3天,不调休!

天津人
2026-07-30 10:23:53
扎心的问题:这个社会那么多人失业、没工作,他们是怎么活下去的

扎心的问题:这个社会那么多人失业、没工作,他们是怎么活下去的

慧翔百科
2026-06-29 11:30:42
退学博士的学术打假风暴:打掉5个院长没人管,打到院士集体沉默

退学博士的学术打假风暴:打掉5个院长没人管,打到院士集体沉默

蝴蝶花雨话教育
2026-07-29 00:35:03
美军证实对伊朗发动新一轮打击

美军证实对伊朗发动新一轮打击

每日经济新闻
2026-07-30 10:29:39
黑龙江倍丰集团原党委书记、副董事长刘斌接受审查调查!

黑龙江倍丰集团原党委书记、副董事长刘斌接受审查调查!

北方农资周刊
2026-07-29 16:11:22
江珊与丈夫素颜同框,平淡烟火气,十分接地气

江珊与丈夫素颜同框,平淡烟火气,十分接地气

娱你同欢
2026-07-29 22:50:17
没想到,伊朗还没倒下,日本竟先崩溃了,日专家:中国在搞鬼

没想到,伊朗还没倒下,日本竟先崩溃了,日专家:中国在搞鬼

青青衫书生
2026-07-28 18:22:21
他是跟谢鹏飞齐名的本人锋霸!被冈田武史和里皮看好,如今却退役

他是跟谢鹏飞齐名的本人锋霸!被冈田武史和里皮看好,如今却退役

振刚说足球
2026-07-30 10:58:43
冯德莱恩懵了,整个欧盟都坐不住了

冯德莱恩懵了,整个欧盟都坐不住了

小马姨
2026-07-29 11:46:42
携程CEO孙洁回应“被罚51亿”的全员信,堪称危机公关教科书

携程CEO孙洁回应“被罚51亿”的全员信,堪称危机公关教科书

观史搜寻着
2026-07-29 21:05:32
湖人队传闻:勒布朗·詹姆斯阵营认为佩林卡愿续约詹姆斯是谎言

湖人队传闻:勒布朗·詹姆斯阵营认为佩林卡愿续约詹姆斯是谎言

好火子
2026-07-29 22:44:57
西行!台风“白海豚”将迎生命史第二巅峰!登陆点中日韩皆有可能

西行!台风“白海豚”将迎生命史第二巅峰!登陆点中日韩皆有可能

声情专递
2026-07-29 19:52:43
俄罗斯的命脉并不在俄罗斯,俄罗斯的死穴只有一个,就是中国

俄罗斯的命脉并不在俄罗斯,俄罗斯的死穴只有一个,就是中国

叶葉夜
2026-07-27 15:44:26
2034杯八强出炉!老挝球队出局,足球小将蓝队小打大惨败,红队晋级!

2034杯八强出炉!老挝球队出局,足球小将蓝队小打大惨败,红队晋级!

范瞼舍长
2026-07-30 01:19:40
79岁王奎荣将北京140平房子、2000多万存款,全部赠予小37岁妻子

79岁王奎荣将北京140平房子、2000多万存款,全部赠予小37岁妻子

国际阿尝
2026-07-04 09:05:08
男子家里地砖异常发热,最高温度飙到46.9℃!他求助网友后被提醒可能是漏电,砸开一看铜线已烧蚀变细;这些电气老化预警信号须牢记

男子家里地砖异常发热,最高温度飙到46.9℃!他求助网友后被提醒可能是漏电,砸开一看铜线已烧蚀变细;这些电气老化预警信号须牢记

扬子晚报
2026-07-29 10:41:10
她一嫁演员祝延平,二嫁杜淳老爸杜志国,如今老了与儿子相依为命

她一嫁演员祝延平,二嫁杜淳老爸杜志国,如今老了与儿子相依为命

老娱记啊
2026-07-29 14:33:41
中国电网负债3万亿,外媒称百年难回本

中国电网负债3万亿,外媒称百年难回本

梦想的现实
2026-07-01 01:11:56
兰州城破后,2000马家军随即跳入黄河,彭德怀:14年血债结清了!

兰州城破后,2000马家军随即跳入黄河,彭德怀:14年血债结清了!

老谢谈史
2026-07-28 10:48:26
60岁李若彤6秒上墙,网友:比我16岁都利索

60岁李若彤6秒上墙,网友:比我16岁都利索

韩小娱
2026-07-30 11:01:15
2026-07-30 11:56:49
芯智讯 incentive-icons
芯智讯
聚焦科技万象,报道前沿资讯。
9102文章数 32128关注度
往期回顾 全部

科技要闻

为什么国产替代越深入,反而越难赚钱?

头条要闻

沈阳一鱼塘现斑海豹 当地多部门已参与搜救:还未找到

头条要闻

沈阳一鱼塘现斑海豹 当地多部门已参与搜救:还未找到

体育要闻

毫无存在感的NBA状元,最先谢谢惠顾?

娱乐要闻

5个瓜!公开道歉、影帝出轨,个个离谱

财经要闻

医保套现乱象:760买片仔癀 中介给了220

汽车要闻

当中国豪华汽车品牌站上世界舞台,应当选择一套怎样的叙事逻辑?

态度原创

旅游
时尚
家居
教育
艺术

旅游要闻

晚风落古巷,盛夏正当燃!台儿庄古城承包你的夏日双重狂欢

夏天最流行的衣服居然是它?减龄又时髦!

家居要闻

2026建博会(广州) 公装联探展交流活动

教育要闻

知名高校,正式关停一文科院系

艺术要闻

伊朗“神级”摩天楼,它没建成,反而是最幸运的事!

无障碍浏览 进入关怀版