网易首页 > 网易号 > 正文 申请入驻

DeepSeek最新论文:如何让大模型跑得更快?梁文锋署名

0
分享至

当行业在讨论谁的模型更聪明时,DeepSeek仍然把目光投向更现实的问题:如何让模型更快。

6月27日,DeepSeek官方在Github低调更新了一篇最新论文,介绍其推理加速框架DSpark,试图解决大语言模型在高并发场景下的推理效率瓶颈。

从作者署名来看,这篇论文由DeepSeek与北京大学联合发布,DeepSeek创始人梁文锋也位列作者名单。在论文中,团队开源了DSpark模型权重,并同步发布了面向推测解码、由算法驱动的训练代码仓库DeepSpec。


DeepSeek最新论文截图

此次论文仍是DeepSeek一贯的技术派风格,论文标题就较为晦涩——《DSpark:基于置信度调度的半自回归生成推测解码》(《DSpark:Confidence-Scheduled Speculative Decoding with Semi-Autoregressive Generation》)。

在论文中,DeepSeek首先解释了需要解决的问题。大语言模型采用自回归方式生成文本:每一个新词元(token)的生成,都需要基于全部前置词元完成一次完整前向传播,结果是输出越长,等待越久。由此带来GPU利用率低下、用户等待时间过长的问题,这是大语言模型线上服务的核心性能瓶颈,在实时对话助手、多轮智能体工作流等低时延敏感场景中尤为突出。

目前的主流方案分为自回归草稿模型(Eagle3)、并行草稿模型(DFlash)两条路线,二者各有缺陷,包括生成质量瓶颈和系统效率瓶颈等,且现有方案均缺乏负载自适应校验机制。

基于此,DeepSeek提出DSpark推测解码框架,采用半自回归架构,通过两套互补机制,解决草稿生成与校验环节的权衡矛盾,将高吞吐并行生成与自适应负载感知校验机制融为一体。

根据论文,在数学推理、代码生成、日常闲聊三类任务的受控离线基准测试中,相较于自回归草稿模型与并行草稿模型,Dspark框架能够大幅提升单轮平均可接受词元长度。

DeepSeek已经将DSpark部署到DeepSeek-V4在线服务系统中,并基于真实用户流量评估其实际性能。结果显示,相较于现有生产环境基线系统MTP-1,在相同吞吐量条件下,DSpark将用户端生成速度提升了60%-85%。

此外,DeepSeek也将这一框架部署在其他模型上,以阿里旗下的Qwen3-4B、8B、14B三个模型为例,相较于自回归草稿模型,DSpark平均单轮可接受词元长度分别提升了30.9%、26.7%、30%;相较于并行草稿模型,DSpark分别提升了16.3%、18.4%、18.3%。

从技术角度来看,这篇论文的主要价值在于,通过算法创新显著提升了模型的推理生成速度。在当前大模型行业逐渐走向落地的背景下,谁能更便宜、更快速地输出结果,也是一项重要的竞争力。此外,通过开源,DeepSeek也再次推动了社区发展。

“AI Infra再次被DeepSeek加速了。”在社交平台,有开发者评价道。也有用户认为,DeepSeek最让人佩服的点在于,模型迭代的同时,推理基础设施也在同步更新,发布V4时,连推理优化一起发,有论文也有代码,还验证了跨模型通用性。

即便近期频频传出融资消息,未来可能需要走向商业化,但通过这一开源,DeepSeek似乎在证明自己仍会坚持开源初心。

责任编辑:李曦_NN2587

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
全市居民医保明年起按年缴费

全市居民医保明年起按年缴费

南方都市报
2026-08-12 07:40:53
我请十来个老同学聚餐,结账时发现多了好几桌人,我一声不吭付了钱就走,没一会儿,班长打来电话:你怎么把老师们都落下了

我请十来个老同学聚餐,结账时发现多了好几桌人,我一声不吭付了钱就走,没一会儿,班长打来电话:你怎么把老师们都落下了

晓艾故事汇
2026-08-12 10:21:40
篡改红歌已立案,郭德纲一觉醒来天塌了,事做太绝了,杨议没说错

篡改红歌已立案,郭德纲一觉醒来天塌了,事做太绝了,杨议没说错

历史点行
2026-08-13 04:15:51
49年军区政委返乡想报杀母之仇,毛主席大手一挥:把425团带去!

49年军区政委返乡想报杀母之仇,毛主席大手一挥:把425团带去!

芊芊子吟
2026-08-08 09:40:09
20年前入世谈判,朱镕基曾怒斥美国:“这很不礼貌”

20年前入世谈判,朱镕基曾怒斥美国:“这很不礼貌”

环球人物杂志
2021-12-12 09:54:30
为了“解压”,上海要再挖一条河

为了“解压”,上海要再挖一条河

每日经济新闻
2026-08-12 23:16:08
瑞典大满贯爆大冷!四大名将出局,蒯曼5小时内打三场,方博出战

瑞典大满贯爆大冷!四大名将出局,蒯曼5小时内打三场,方博出战

空樽对月花独瘦
2026-08-13 04:14:32
特朗普"最强悍"新闻秘书辞职回家带娃 白宫临阵缺将

特朗普"最强悍"新闻秘书辞职回家带娃 白宫临阵缺将

冰汝看美国
2026-08-13 06:10:18
官媒曝光韩红真实籍贯,不是西藏和北京,原来她和成龙是同类人

官媒曝光韩红真实籍贯,不是西藏和北京,原来她和成龙是同类人

调侃国际观点
2026-06-29 04:45:48
形势严峻:1-7月,中国芯片进出口逆差增大了1700亿元

形势严峻:1-7月,中国芯片进出口逆差增大了1700亿元

互联网.乱侃秀
2026-08-12 10:49:53
2026手握存款100万,我却亲眼目睹5个朋友家庭存款崩塌

2026手握存款100万,我却亲眼目睹5个朋友家庭存款崩塌

另子维爱读史
2026-08-08 21:10:25
1941 年日军一路追击国军溃兵,不料迎面撞上王牌74军,师长李天霞一个眼神警卫心领神会,一场血战令上高成为日军挥之不去的噩梦

1941 年日军一路追击国军溃兵,不料迎面撞上王牌74军,师长李天霞一个眼神警卫心领神会,一场血战令上高成为日军挥之不去的噩梦

唠叨说历史
2026-08-10 15:59:07
3:1!中国女排挺进8强,拦网不如对手,带刀二传3发,日本被淘汰

3:1!中国女排挺进8强,拦网不如对手,带刀二传3发,日本被淘汰

跑者排球视角
2026-08-13 07:31:28
长江存储出货量首次跻身全球前三

长江存储出货量首次跻身全球前三

南方都市报
2026-08-12 16:58:05
小姐姐误穿“开裆裤”遛狗,本来已经够要命,结果底下还是安睡裤??路人不解但尊重:她这么穿肯定有她的道理!

小姐姐误穿“开裆裤”遛狗,本来已经够要命,结果底下还是安睡裤??路人不解但尊重:她这么穿肯定有她的道理!

爱宠物
2026-08-13 00:03:51
从胖东来到腾讯:房东是怎么把自己玩死的…

从胖东来到腾讯:房东是怎么把自己玩死的…

思哲与创富
2026-08-12 11:15:17
南海部分海域进行火箭发射,禁止驶入

南海部分海域进行火箭发射,禁止驶入

界面新闻
2026-08-13 09:03:09
中企前脚被逼走,印尼矿工后脚怒烧大楼,局势失控西方媒体全失声

中企前脚被逼走,印尼矿工后脚怒烧大楼,局势失控西方媒体全失声

梦想的现实
2026-08-12 23:52:33
《欢迎来龙餐馆》为什么是烂片?缺乏是非立场的好人叙事,很鸡贼

《欢迎来龙餐馆》为什么是烂片?缺乏是非立场的好人叙事,很鸡贼

马庆云的影音娱
2026-08-12 08:46:18
蛇鼠一窝!恒大二把手夏海钧在美国的邻居,竟然是另一个逃跑富豪

蛇鼠一窝!恒大二把手夏海钧在美国的邻居,竟然是另一个逃跑富豪

阿晭评论哥
2026-07-18 22:00:09
2026-08-13 09:56:49
第一财经资讯 incentive-icons
第一财经资讯
第一财经官方账号
262654文章数 623247关注度
往期回顾 全部

科技要闻

DeepSeek V4 Pro更新:性价比炸裂 仍需打磨

头条要闻

男子遭"炸街"折磨刺死19岁小伙获死刑 被害人父亲发声

头条要闻

男子遭"炸街"折磨刺死19岁小伙获死刑 被害人父亲发声

体育要闻

杜兰特,所谓的“联盟小王”

娱乐要闻

郭德纲魔改红歌被立案!

财经要闻

韩国可能迎来失去的三十年

汽车要闻

全系600km续航/空间表现出色 奇瑞风云T7预售10.99万起

态度原创

时尚
本地
数码
游戏
艺术

婚纱照销毁潮,体面得有点好笑

本地新闻

黄州一夜,苏轼写给普通人的月光

数码要闻

联想来酷Air 14 2026新增酷睿3-304/5-320处理器版本,3999元起

Remedy对《控制:共振》十分自信 称是玩家必买之作

艺术要闻

赏心悦目的色调,看了非常治愈!

无障碍浏览 进入关怀版