网易首页 > 网易号 > 正文 申请入驻

NeurIPS 2025 Spotlight | 中国联通以全局优化重塑扩散模型加速

0
分享至

作者和团队介绍:本文一作是高焕霖和陈平,通讯作者为赵放和廉士国,其他作者还包括石芙源、谭超、刘兆祥、王恺,所有作者均来自联通数据智能有限公司(联通数据科学与人工智能研究院)元景大模型研发团队。

当前,视频生成模型性能正在快速提升,尤其是基于Transformer架构的DiT模型,在视频生成领域的表现已经逐渐接近真实拍摄效果。然而,这些扩散模型也面临一个共同的瓶颈:推理时间长、算力成本高、生成速度难以提升。随着视频生成长度持续增加、分辨率不断提高,这个瓶颈正在成为影响视频创作体验的主要障碍之一。

来自中国联通数据科学与人工智能研究院的研究团队提出了一个全新的思路 :LeMiCa(Lexicographic Minimax Path Caching)——一种无需训练、全局最优建模的缓存加速框架,能在保持画质与一致性的同时,实现高效的推理加速。LeMiCa解决的是一个长期被“局部贪心决策”束缚的老问题:扩散模型是否存在一种真正“全局一致、误差可控、速度极快”的缓存加速路径?研究答案是:有。并且比想象中简单得多。

这项研究已经成功入选 NeurIPS 2025 Spotlight。

论文标题:

LeMiCa: Lexicographic Minimax Path Caching for Efficient Diffusion-Based Video Generation

论文链接:

https://arxiv.org/abs/2511.00090

项目主页:

https://unicomai.github.io/LeMiCa

代码地址:

https://github.com/UnicomAI/LeMiCa

核心亮点:

LeMiCa 如何做到“又快又稳”?

当前主流的缓存加速方法(如TeaCache)采用了“局部贪心”策略:如果相邻时间步之间的变化很小,就选择复用缓存。然而,这种“走一步看一步”的策略忽视了扩散模型的重要特性——早期步骤对生成结果有较高的敏感性,微小的误差可能在后期被不断放大,影响最终画质。同时,许多现有方法需要引入在线判别机制,这会引入额外的计算负担,使得生成过程依然缓慢。

LeMiCa的核心思想是:

“缓存加速并不是局部决策问题,而是一个全局路径优化问题。”

研究团队发现,扩散模型的生成过程其实可以抽象成一个带权有向无环图(DAG) 。每个节点代表一个时间步,每条边代表在两个时间步之间“跳过计算、复用缓存”的行为,边的权重则对应缓存导致的全局误差。这样,缓存策略可以很自然的转化为在DAG中搜索最优路径的问题。

LeMiCa技术实现:从误差建模到图优化

为了准确评估缓存的影响,LeMiCa提出了一种全新的误差度量方法,通过离线构建静态DAG来量化缓存对最终生成视频结果的影响。DAG的构成部分主要有:1)节点:每个时间步;2)边:可能的缓存区间;3)边权重:缓存-复用引发的全局重建误差。具体来说,对于DAG中节点i到j的边权被定义为:

在图构建过程中,我们会对每个时间步进行节点抽象。DAG中的每一条边代表在时间步i到j之间跳过若干步计算、直接复用缓存的行为。为避免图过于庞大,LeMiCa依据“距离越长,缓存误差越大”的先验知识,设置了最大跳跃长度,从而只保留合理的缓存段以减少搜索复杂度。最终,为了保证鲁棒性和泛化性,LeMiCa仅使用少量样本(prompt和seed)离线生成多个DAG并进行融合,最终得到一个静态的、跨任务可复用的全局误差图。

字典序极小化路径优化(Lexicographic Minimax Path):在构建好静态误差图之后,LeMiCa 将缓存调度问题形式化为:在固定预算 B 下,从起点到终点寻找一条最优路径。由于传统的“最短路径”或“局部最优”算法不具备线性可加性,导致最短路径算法不再适用,LeMiCa采用了字典序极小化准则来进行路径搜索。这种优化方式不追求误差总和最小,而是逐层比较路径中各段缓存的误差值,确保:

  • 最大误差被最小化(避免单段灾难性退化)
  • 误差分布更均衡(提升全局一致性)

形式化定义如下:

通过字典序比较,LeMiCa避免了“看似整体误差低但中间崩坏”的路径:

若路径A的最大误差 < 路径B的最大误差 → A 更优
若最大误差相同 → 比较第二大依次类推

实验结果:加速与画质兼得

联通元景大模型研究团队在多个主流视频生成模型中验证了LeMiCa的性能。从结果中可以看到该方法在保留加速前后的视觉一致性具有显著优势,这也正是全局路径视角下的图优化所带来的增益。

从视觉效果上看,LeMiCa生成的视频在结构风格保持、内容一致性方面都显著提升。

即使在高倍加速推理下,也几乎看不出明显退化。

从结果中可以看出,LeMiCa对比其他主流方法,存在以下明显优势:

  1. 极佳的生成效果:结构、纹理和内容一致性全面提升;
  2. 优秀的加速性能:提供2.4×以上的高倍加速推理;

消融实验:

少样本建图,高鲁棒性,场景扩展能力

极少样本建立DAG:LeMiCa仅凭少量样本即可构建高质量缓存路径,单样本已具强性能,20个样本即达到性能饱和,体现了静态缓存策略的高效与稳健。

加速路径的鲁棒性:即使改变采样调度中的轨迹缩放参数得到不同的去噪轨迹,LeMiCa仍有较好的效果,体现了良好的路径鲁棒性。

文生图模型兼容:由于LeMiCa本质上是一个用于扩散模型缓存加速的框架,因此其也适用于文生图模型。我们拿最新的QWen-Image模型进行了实验,得到了同样出色的加速效果:

业界顶级团队推荐

LeMiCa得到了顶级多模态模型研发团队阿里通义千问智谱AI的认可,分别在其官方主页上对LeMiCa进行权威推荐!

总结与展望

LeMiCa以全局优化视角重新定义了扩散视频生成的加速问题。它突破了传统“局部贪心”式缓存策略的局限,将缓存调度建模为有向无环图(DAG)上的全局路径搜索问题。作为一种通用的免训练加速框架,LeMiCa为视频生成带来了“又快又稳”的新范式,联通元景大模型团队希望以此为基石,为业界关于扩散模型的加速和复杂场景生成提供新的思考角度。

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
8月11日,人社部养老金调整公布了吗?今年如果不涨了,会怎样?

8月11日,人社部养老金调整公布了吗?今年如果不涨了,会怎样?

陈博世财经
2026-08-11 14:08:15
一针见血!伊布谈阿尔瓦雷斯转会:不是球员背叛,是他的野心超出马竞上限

一针见血!伊布谈阿尔瓦雷斯转会:不是球员背叛,是他的野心超出马竞上限

体育闲话说
2026-08-11 17:42:04
600万吨大豆送到中国,美才发现中计了,中方已成功“借鸡生蛋”

600万吨大豆送到中国,美才发现中计了,中方已成功“借鸡生蛋”

杰丝聊古今
2026-08-12 03:30:01
突然发文“当不了爱豆了”…他这是怎么了?

突然发文“当不了爱豆了”…他这是怎么了?

奋斗在韩国
2026-08-10 13:40:08
越媒:越南出门不用带钱包,像中国一样扫码支付,发展无法想象

越媒:越南出门不用带钱包,像中国一样扫码支付,发展无法想象

趣味萌宠的日常
2026-08-12 00:23:25
卫诗雅:我这辈子最正确的决定,就是在41岁嫁人后没有放弃演戏

卫诗雅:我这辈子最正确的决定,就是在41岁嫁人后没有放弃演戏

飘飘然的娱乐汇
2026-08-10 23:31:43
河南杀疯了!官宣10.01克拉珍稀绿钻,全球仅2颗,品质当世最佳!

河南杀疯了!官宣10.01克拉珍稀绿钻,全球仅2颗,品质当世最佳!

果壳
2026-08-11 19:03:05
贾冰到底说什么难听话了,贾冰发道歉信了,没有责怪偷拍人

贾冰到底说什么难听话了,贾冰发道歉信了,没有责怪偷拍人

西楼知趣杂谈
2026-08-10 18:39:56
南大校花,娇小骨架,小巧身形,简直是无敌存在!

南大校花,娇小骨架,小巧身形,简直是无敌存在!

云端小院
2026-07-25 07:16:54
遭全网抵制!拿没教养当个性的她,终于惹众怒,难怪连郝蕾都嫌弃

遭全网抵制!拿没教养当个性的她,终于惹众怒,难怪连郝蕾都嫌弃

青杉依旧啊啊
2026-08-11 14:41:17
高速服务区“开水间”英文标识竟是“Open Water rooms”,网友吐槽“中文直译闹笑话”,运营单位:将整改

高速服务区“开水间”英文标识竟是“Open Water rooms”,网友吐槽“中文直译闹笑话”,运营单位:将整改

极目新闻
2026-08-11 17:54:06
巨大悲痛!39岁梅西无限期休养:3好友陪伴左右 将起诉阿根廷媒体

巨大悲痛!39岁梅西无限期休养:3好友陪伴左右 将起诉阿根廷媒体

风过乡
2026-08-11 06:28:53
人伦大乱正在毁掉无数中国家庭:3种乱象就在日常,拖垮一家人

人伦大乱正在毁掉无数中国家庭:3种乱象就在日常,拖垮一家人

阿凯销售场
2026-07-04 15:35:28
iPhone18ProMax突然上架:8月11日,正式预售

iPhone18ProMax突然上架:8月11日,正式预售

3C毒物
2026-08-12 01:28:48
山东呆小伙结婚,新娘只有8岁智商,网友:清纯漂亮,谁不喜欢

山东呆小伙结婚,新娘只有8岁智商,网友:清纯漂亮,谁不喜欢

荔子言
2026-08-10 17:08:01
李莉同志简历,因多次预判到美军动作,被美国列入制裁黑名单

李莉同志简历,因多次预判到美军动作,被美国列入制裁黑名单

谈史论天地
2026-04-18 10:35:33
17岁身高1米94、技术细腻,就读清华附中的他会成为“中国哈兰德”?

17岁身高1米94、技术细腻,就读清华附中的他会成为“中国哈兰德”?

新民周刊
2026-08-11 15:29:35
信胜科技:8月12日正式申购,发行价14.35元/股

信胜科技:8月12日正式申购,发行价14.35元/股

面包财经
2026-08-11 18:16:03
韩国第二季度出口2755亿美元创新高 同比增长57.3%

韩国第二季度出口2755亿美元创新高 同比增长57.3%

财联社
2026-08-11 15:25:03
程梦圆失踪,闺蜜迟迟才说出另一张卡,她到底在怕什么?

程梦圆失踪,闺蜜迟迟才说出另一张卡,她到底在怕什么?

阿莱美食汇
2026-08-12 02:28:30
2026-08-12 05:00:49
机器之心Pro incentive-icons
机器之心Pro
专业的人工智能媒体
13733文章数 142718关注度
往期回顾 全部

科技要闻

AI大战变天:扎克伯格突然回头

头条要闻

网红"雅典娜"失踪3年 好友:她被李姓女网友诱骗至境外

头条要闻

网红"雅典娜"失踪3年 好友:她被李姓女网友诱骗至境外

体育要闻

NBA老顽童,抽着大麻喝着小酒告别了

娱乐要闻

“雅典娜”确认被害 细节令人发指!

财经要闻

AI泡沫的剧本,是2008年的次贷危机?

汽车要闻

闪充/天神之眼B/云辇-C 2027款海豹06售9.99万元起

态度原创

健康
本地
房产
游戏
家居

心血管专家破解猝死八大谣言

本地新闻

黄州一夜,苏轼写给普通人的月光

房产要闻

突发,崖州湾又有大动作!

淘宝百亿补贴 港版PS5轻薄款降至3600元:可冲了?

家居要闻

2026建博会(广州) 公装联探展交流活动

无障碍浏览 进入关怀版