网易首页 > 网易号 > 正文 申请入驻

DeepSeek最新论文:如何让大模型跑得更快?梁文锋署名

0
分享至

当行业在讨论谁的模型更聪明时,DeepSeek仍然把目光投向更现实的问题:如何让模型更快。

6月27日,DeepSeek官方在Github低调更新了一篇最新论文,介绍其推理加速框架DSpark,试图解决大语言模型在高并发场景下的推理效率瓶颈。

从作者署名来看,这篇论文由DeepSeek与北京大学联合发布,DeepSeek创始人梁文锋也位列作者名单。在论文中,团队开源了DSpark模型权重,并同步发布了面向推测解码、由算法驱动的训练代码仓库DeepSpec。


DeepSeek最新论文截图

此次论文仍是DeepSeek一贯的技术派风格,论文标题就较为晦涩——《DSpark:基于置信度调度的半自回归生成推测解码》(《DSpark:Confidence-Scheduled Speculative Decoding with Semi-Autoregressive Generation》)。

在论文中,DeepSeek首先解释了需要解决的问题。大语言模型采用自回归方式生成文本:每一个新词元(token)的生成,都需要基于全部前置词元完成一次完整前向传播,结果是输出越长,等待越久。由此带来GPU利用率低下、用户等待时间过长的问题,这是大语言模型线上服务的核心性能瓶颈,在实时对话助手、多轮智能体工作流等低时延敏感场景中尤为突出。

目前的主流方案分为自回归草稿模型(Eagle3)、并行草稿模型(DFlash)两条路线,二者各有缺陷,包括生成质量瓶颈和系统效率瓶颈等,且现有方案均缺乏负载自适应校验机制。

基于此,DeepSeek提出DSpark推测解码框架,采用半自回归架构,通过两套互补机制,解决草稿生成与校验环节的权衡矛盾,将高吞吐并行生成与自适应负载感知校验机制融为一体。

根据论文,在数学推理、代码生成、日常闲聊三类任务的受控离线基准测试中,相较于自回归草稿模型与并行草稿模型,Dspark框架能够大幅提升单轮平均可接受词元长度。

DeepSeek已经将DSpark部署到DeepSeek-V4在线服务系统中,并基于真实用户流量评估其实际性能。结果显示,相较于现有生产环境基线系统MTP-1,在相同吞吐量条件下,DSpark将用户端生成速度提升了60%-85%。

此外,DeepSeek也将这一框架部署在其他模型上,以阿里旗下的Qwen3-4B、8B、14B三个模型为例,相较于自回归草稿模型,DSpark平均单轮可接受词元长度分别提升了30.9%、26.7%、30%;相较于并行草稿模型,DSpark分别提升了16.3%、18.4%、18.3%。

从技术角度来看,这篇论文的主要价值在于,通过算法创新显著提升了模型的推理生成速度。在当前大模型行业逐渐走向落地的背景下,谁能更便宜、更快速地输出结果,也是一项重要的竞争力。此外,通过开源,DeepSeek也再次推动了社区发展。

“AI Infra再次被DeepSeek加速了。”在社交平台,有开发者评价道。也有用户认为,DeepSeek最让人佩服的点在于,模型迭代的同时,推理基础设施也在同步更新,发布V4时,连推理优化一起发,有论文也有代码,还验证了跨模型通用性。

即便近期频频传出融资消息,未来可能需要走向商业化,但通过这一开源,DeepSeek似乎在证明自己仍会坚持开源初心。

责任编辑:李曦_NN2587

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
郭炳湘遭张子强绑架囚禁六天,20亿赎金谈至6亿脱困,事后发现母亲藏有绝密文件,手段远比绑匪狠厉

郭炳湘遭张子强绑架囚禁六天,20亿赎金谈至6亿脱困,事后发现母亲藏有绝密文件,手段远比绑匪狠厉

唠叨说历史
2026-07-10 16:24:33
程梦圆灵车下山全程车窗敞开,内情远比流言更戳心!

程梦圆灵车下山全程车窗敞开,内情远比流言更戳心!

据说说娱乐
2026-08-12 04:29:43
李善长被灭族时已经75岁,和朱元璋说:我已经老到无力造反

李善长被灭族时已经75岁,和朱元璋说:我已经老到无力造反

浩渺青史
2026-07-26 21:50:06
8岁恋上老师,12岁官宣,一句“等你长大就结婚”,如今咋样了?

8岁恋上老师,12岁官宣,一句“等你长大就结婚”,如今咋样了?

郭蛹包工头
2026-08-10 04:57:02
《重器》大结局:五人团死二散三,用血泪铺就法治之路

《重器》大结局:五人团死二散三,用血泪铺就法治之路

肆季娱乐
2026-08-12 14:29:55
周星驰综艺首谈《功夫女足》!老友谷德昭现场力挺:这是一场漂亮的胜仗

周星驰综艺首谈《功夫女足》!老友谷德昭现场力挺:这是一场漂亮的胜仗

易象君
2026-08-11 22:37:15
13日凌晨WTT大满贯:3-1、3-2!美和丢局,陈幸同逆转,下轮抗日

13日凌晨WTT大满贯:3-1、3-2!美和丢局,陈幸同逆转,下轮抗日

烟浔渺渺
2026-08-13 04:07:32
加勒万河谷那场680人的贴身肉搏,打了整整八个小时,中印两边的伤亡数字至今仍是个谜,真相到底是什么?

加勒万河谷那场680人的贴身肉搏,打了整整八个小时,中印两边的伤亡数字至今仍是个谜,真相到底是什么?

千年历史老号
2026-08-11 12:48:47
预测总票房超75亿,包揽冠亚军,沈腾即将创造“历史”

预测总票房超75亿,包揽冠亚军,沈腾即将创造“历史”

影视高原说
2026-08-13 15:22:26
中国电网负债3万亿,外媒称百年难回本

中国电网负债3万亿,外媒称百年难回本

梦想的现实
2026-07-01 01:11:56
央八生活剧来袭!8月14日正式开播!积压时间长达四年

央八生活剧来袭!8月14日正式开播!积压时间长达四年

空樽对月花独瘦
2026-08-11 21:53:45
巨资收买歼10CE叛逃?印媒:西方盯上巴空军,战机导弹都想要

巨资收买歼10CE叛逃?印媒:西方盯上巴空军,战机导弹都想要

探索新高度
2026-08-12 02:46:38
瑞银预测:黄金明年6月底涨到5200美元,4000美元以下可考虑配置

瑞银预测:黄金明年6月底涨到5200美元,4000美元以下可考虑配置

中新经纬
2026-08-13 11:56:12
朱女士接受采访时开的车,很上档次!引热议:有人说是特斯拉,也有人说是奔驰

朱女士接受采访时开的车,很上档次!引热议:有人说是特斯拉,也有人说是奔驰

火山詩话
2026-08-10 07:44:14
5800万年轻人不交社保了:断缴的不是懒惰,是生存的算术

5800万年轻人不交社保了:断缴的不是懒惰,是生存的算术

互联网大观
2026-07-21 10:03:18
四川85后,给工厂装上Agent,再融10亿

四川85后,给工厂装上Agent,再融10亿

中国企业家杂志
2026-08-12 18:57:37
无人敢细讲的90年代下岗潮:一代人打碎尊严谋生,才换中国逆天改命

无人敢细讲的90年代下岗潮:一代人打碎尊严谋生,才换中国逆天改命

浪子说
2026-08-12 08:27:38
这很科学:89%的人幻想过同时和多人发生性行为,算精神出轨吗?

这很科学:89%的人幻想过同时和多人发生性行为,算精神出轨吗?

宇宙时空
2026-05-26 18:20:10
刚吞下敬业钢厂,英国转头又盯上比亚迪!没想到比亚迪早就学精了

刚吞下敬业钢厂,英国转头又盯上比亚迪!没想到比亚迪早就学精了

青青子衿
2026-08-11 20:48:05
85岁的广东演员鲁牛:我不是在广东出生,但广东人却十分认同我

85岁的广东演员鲁牛:我不是在广东出生,但广东人却十分认同我

阿讯说天下
2026-08-13 12:22:06
2026-08-13 16:36:49
第一财经资讯 incentive-icons
第一财经资讯
第一财经官方账号
262708文章数 623247关注度
往期回顾 全部

科技要闻

DeepSeek V4 Pro更新:性价比炸裂 仍需打磨

头条要闻

普京大动作:一边释放前美士兵 一边向日本"亮肌肉"

头条要闻

普京大动作:一边释放前美士兵 一边向日本"亮肌肉"

体育要闻

负债十几亿的联赛,还在疯狂买球星

娱乐要闻

篡改红歌已立案,郭德纲大祸临头

财经要闻

韩国可能迎来失去的三十年

汽车要闻

试了奇瑞捷豹路虎神行者8,才知道它的i-ATS有多强?

态度原创

房产
游戏
数码
教育
艺术

房产要闻

投资暴跌90%!文昌楼市,正在停摆!

《星战》新作玩法机制曝光 甚至支持永久死亡选项

数码要闻

努比亚Neo 5 Max全球发布 7.5英寸巨屏+主机级肩键

教育要闻

日常英语:在车厢内大声打电话

艺术要闻

于小冬 2026泽库写生新作

无障碍浏览 进入关怀版