网易首页 > 网易号 > 正文 申请入驻

Talk预告 | 香港大学吴成岳:从理论瓶颈到实际加速, 通过Fast-dLLM实现高效扩散LLM推理

0
分享至

本期为TechBeat人工智能社区735线上Talk。

北京时间12月17日(周三) 20:00,香港大学博士生吴成岳的Talk将准时在TechBeat人工智能社区开播!

他与大家分享的主题是:从理论瓶颈到实际加速—通过Fast-dLLM实现高效扩散LLM推理。介时他将向大家介绍 Fast-dLLM 及其 v2 版本。该方法通过近似分块缓存、置信度感知解码及 AR-Diffusion 混合架构,实现了高达 27.6 倍的吞吐提升。

Talk·信息

主题:从理论瓶颈到实际加速 — 通过Fast-dLLM实现高效扩散LLM推理

嘉宾:香港大学 · 博士生 - 吴成岳

时间:北京时间12月17日(周三) 20:00

地点:TechBeat人工智能社区

http://www.techbeat.net/

Talk·介绍

Diffusion LLM 虽具备并行生成与双向注意力优势,却因无法利用 KV Cache 及并行解码质量下降,推理速度远逊于自回归模型。本次分享介绍 Fast-dLLM 及其 v2 版本,通过近似分块缓存、置信度感知解码及 AR-Diffusion 混合架构,实现了高达 27.6 倍的吞吐提升;v2 版本更在保持高质量的同时,超越 LLaMA3 等 SOTA 模型 2.5 倍速,打破了其实用化瓶颈。

Talk大纲

1. 背景与挑战:

对比自回归模型,解析 Diffusion LLMs 的并行生成潜力,并指出阻碍其实际部署的两大核心瓶颈——KV Cache 的缺失与并行解码的质量退化。

2. Fast-dLLM (Training-free):

介绍如何通过近似分块 KV 缓存机制解决缓存不兼容问题,利用置信度感知并行解码策略修复由条件独立假设导致的质量下降。

3. Fast-dLLM v2 (Hybrid Paradigm):

详解进阶版架构,引入 Block Diffusion(AR-Diffusion 混合范式)与层级缓存机制,展示如何仅用约 1B token 实现低成本高效适配。

4. 实验与评估:

展示与 Vanilla Diffusion 及 LLaMA3/Qwen2.5 等顶尖自回归模型的对比结果,分析在推理速度(最高 27.6x 吞吐提升)与生成质量上的综合表现。

5. 总结:

探讨 Fast-dLLM 系列工作对 Diffusion LLM 迈向大规模实用化的里程碑意义。

Talk·预习资料


论文链接: https://arxiv.org/abs/2505.22618 代码链接: https://github.com/NVlabs/Fast-dLLM


论文链接: https://arxiv.org/abs/2509.26328



Talk·提问交流

在Talk界面下的【交流区】参与互动!留下你的打call和问题,和更多小伙伴们共同讨论,被讲者直接翻牌解答!


你的每一次贡献,我们都会给予你相应的i豆积分,还会有惊喜奖励哦!

Talk·嘉宾介绍


吴成岳‍‍‍‍‍‍‍‍‍‍‍

香港大学 · 博士生
‍‍‍

研究领域包括多模态基础模型和大语言模型。迄今已在CVPR、ACL、ICML、NeurlPS 等国际顶会发表论文十余篇,六篇为第一作者,累计引用1400余次,相关开源项目在GitHub上获得超1.8万星标。

主导研发了统一的多模态理解框架Janus,在DeepSeek提出视觉编码解耦的新范式。在NVIDIA实习期间,作为Fast-dLLM 项目核心成员,提出理论驱动的解码算法,使扩散语言模型生成效率提升了 10 倍,后续迭代版本Fast-dLLM v2 进一步实现2-3倍加速。

个人主页: https://www.techbeat.net/grzytrkj?id=46004

-The End-


如果你也想成为讲者

自荐 / 推荐

单人Talk | 团队专场 | 录播or直播 | 闭门交流

多种方式任你选择!

推荐讲者成功也有奖励哦~

关于TechBeat人工智能社区

TechBeat(www.techbeat.net)隶属于将门创投,是一个荟聚全球华人AI精英的成长社区。

我们希望为AI人才打造更专业的服务和体验,加速并陪伴其学习成长。

期待这里可以成为你学习AI前沿知识的高地,分享自己最新工作的沃土,在AI进阶之路上的升级打怪的根据地!

更多详细介绍>>

预约本期Talk

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
扎心了!原来只要失业,所有人都一样!网友分享越看越心凉 太难了

扎心了!原来只要失业,所有人都一样!网友分享越看越心凉 太难了

有趣的火烈鸟
2025-12-31 20:39:06
谷爱凌突发脑出血命悬一线!训练中情绪失控痛哭,母亲披露内情,官媒罕见表态

谷爱凌突发脑出血命悬一线!训练中情绪失控痛哭,母亲披露内情,官媒罕见表态

动物奇奇怪怪
2026-02-03 06:23:41
罕见重挫,寒武纪市值蒸发近700亿

罕见重挫,寒武纪市值蒸发近700亿

第一财经资讯
2026-02-03 12:36:08
损失大了!青岛一辆满载新车的板车撞上了过街天桥!

损失大了!青岛一辆满载新车的板车撞上了过街天桥!

摘要
2026-02-03 13:55:06
除夕夜可在万米高空看春晚,东航将为所有入境宽体机航班旅客赠送高速Wi-Fi

除夕夜可在万米高空看春晚,东航将为所有入境宽体机航班旅客赠送高速Wi-Fi

新京报
2026-02-03 17:28:07
台贵客抵达北京!岛内变天信号出现,关键时刻,美日态度惊人一致

台贵客抵达北京!岛内变天信号出现,关键时刻,美日态度惊人一致

书纪文谭
2026-02-02 23:17:16
1951年邓小平重庆审死刑名单,见熟名停住,此人处决后果不堪设想

1951年邓小平重庆审死刑名单,见熟名停住,此人处决后果不堪设想

唠叨说历史
2026-02-03 11:10:55
“沃什不降息就告到他底裤不剩!”特朗普晚宴讲段子遭冷场,“委内瑞拉可成第53州”?

“沃什不降息就告到他底裤不剩!”特朗普晚宴讲段子遭冷场,“委内瑞拉可成第53州”?

红星新闻
2026-02-02 18:30:18
告诉大家一个坏消息:上海、广州出现3大怪象,正在蔓延,需深思

告诉大家一个坏消息:上海、广州出现3大怪象,正在蔓延,需深思

往事我敬你一杯酒人
2025-12-27 06:59:49
保姆想让雇主嫁给儿子这是啥心理?网友:这算盘打得好 想身份互换

保姆想让雇主嫁给儿子这是啥心理?网友:这算盘打得好 想身份互换

另子维爱读史
2026-01-30 18:18:16
高一女生被人造黄谣,妈妈24小时硬核维权:你的清白,无需自证

高一女生被人造黄谣,妈妈24小时硬核维权:你的清白,无需自证

右右细毛和爸妈
2026-01-31 21:17:02
可能爆发全面战争

可能爆发全面战争

杨兴文
2026-02-02 15:35:38
男人切记:搞定女人的“千古定律”,只有一条,屡试不爽!

男人切记:搞定女人的“千古定律”,只有一条,屡试不爽!

云端小院
2026-01-31 08:59:12
Adobe将关停25年历史动画制作工具Animate,用户抗议过于突然且无替代产品

Adobe将关停25年历史动画制作工具Animate,用户抗议过于突然且无替代产品

澎湃新闻
2026-02-03 16:24:04
大搞权钱交易,安徽一企业原董事长被“双开”!另有5人被查

大搞权钱交易,安徽一企业原董事长被“双开”!另有5人被查

凤凰网安徽
2026-02-03 16:47:32
内地歌手晒与大S去世前5天聊天截图,过了快6年还主动问候,暖心

内地歌手晒与大S去世前5天聊天截图,过了快6年还主动问候,暖心

史行途
2026-02-03 09:44:11
台贵客抵达北京!岛内变天信号出现,关键时刻,美日态度惊人一致

台贵客抵达北京!岛内变天信号出现,关键时刻,美日态度惊人一致

现代小青青慕慕
2026-02-02 14:27:09
内幕来了!中国雷达被正名,美媒:美军向委内瑞拉投下电磁脉冲弹

内幕来了!中国雷达被正名,美媒:美军向委内瑞拉投下电磁脉冲弹

开着车去流浪
2026-01-31 23:48:08
柳叶刀推荐的十款护肝品牌核心指标拆解,熬夜党、饮酒族、肝专属匹配方案

柳叶刀推荐的十款护肝品牌核心指标拆解,熬夜党、饮酒族、肝专属匹配方案

影像渭南
2026-02-02 10:39:09
黄金、白银大涨

黄金、白银大涨

华商网
2026-02-03 10:02:26
2026-02-03 18:15:00
将门创投 incentive-icons
将门创投
加速及投资技术驱动型初创企业
2302文章数 596关注度
往期回顾 全部

科技要闻

1.25万亿美元!xAI员工赢麻了

头条要闻

克林顿将就爱泼斯坦案出庭作证 在美国历史上极为罕见

头条要闻

克林顿将就爱泼斯坦案出庭作证 在美国历史上极为罕见

体育要闻

“也许我的一小步,会成为中国足球的一大步”

娱乐要闻

小S致词:感谢具俊晔陪伴大S的最后3年

财经要闻

精神病医院骗保内幕调查:住院相当于坐牢

汽车要闻

上汽决定不再等那个“正确答案”了

态度原创

游戏
房产
数码
公开课
军事航空

《全境封锁:终极版》突然上线Xbox商店开放购买

房产要闻

大盘最低杀到8000+/㎡!海口59盘,最新房价曝光!

数码要闻

2399元!盛色OM74星尘白显示器开抢啦

公开课

李玫瑾:为什么性格比能力更重要?

军事要闻

特朗普:庞大兵力将很快抵达伊朗

无障碍浏览 进入关怀版