网易首页 > 网易号 > 正文 申请入驻

DeepSeek最新论文:如何让大模型跑得更快?梁文锋署名

0
分享至

当行业在讨论谁的模型更聪明时,DeepSeek仍然把目光投向更现实的问题:如何让模型更快。

6月27日,DeepSeek官方在Github低调更新了一篇最新论文,介绍其推理加速框架DSpark,试图解决大语言模型在高并发场景下的推理效率瓶颈。

从作者署名来看,这篇论文由DeepSeek与北京大学联合发布,DeepSeek创始人梁文锋也位列作者名单。在论文中,团队开源了DSpark模型权重,并同步发布了面向推测解码、由算法驱动的训练代码仓库DeepSpec。


DeepSeek最新论文截图

此次论文仍是DeepSeek一贯的技术派风格,论文标题就较为晦涩——《DSpark:基于置信度调度的半自回归生成推测解码》(《DSpark:Confidence-Scheduled Speculative Decoding with Semi-Autoregressive Generation》)。

在论文中,DeepSeek首先解释了需要解决的问题。大语言模型采用自回归方式生成文本:每一个新词元(token)的生成,都需要基于全部前置词元完成一次完整前向传播,结果是输出越长,等待越久。由此带来GPU利用率低下、用户等待时间过长的问题,这是大语言模型线上服务的核心性能瓶颈,在实时对话助手、多轮智能体工作流等低时延敏感场景中尤为突出。

目前的主流方案分为自回归草稿模型(Eagle3)、并行草稿模型(DFlash)两条路线,二者各有缺陷,包括生成质量瓶颈和系统效率瓶颈等,且现有方案均缺乏负载自适应校验机制。

基于此,DeepSeek提出DSpark推测解码框架,采用半自回归架构,通过两套互补机制,解决草稿生成与校验环节的权衡矛盾,将高吞吐并行生成与自适应负载感知校验机制融为一体。

根据论文,在数学推理、代码生成、日常闲聊三类任务的受控离线基准测试中,相较于自回归草稿模型与并行草稿模型,Dspark框架能够大幅提升单轮平均可接受词元长度。

DeepSeek已经将DSpark部署到DeepSeek-V4在线服务系统中,并基于真实用户流量评估其实际性能。结果显示,相较于现有生产环境基线系统MTP-1,在相同吞吐量条件下,DSpark将用户端生成速度提升了60%-85%。

此外,DeepSeek也将这一框架部署在其他模型上,以阿里旗下的Qwen3-4B、8B、14B三个模型为例,相较于自回归草稿模型,DSpark平均单轮可接受词元长度分别提升了30.9%、26.7%、30%;相较于并行草稿模型,DSpark分别提升了16.3%、18.4%、18.3%。

从技术角度来看,这篇论文的主要价值在于,通过算法创新显著提升了模型的推理生成速度。在当前大模型行业逐渐走向落地的背景下,谁能更便宜、更快速地输出结果,也是一项重要的竞争力。此外,通过开源,DeepSeek也再次推动了社区发展。

“AI Infra再次被DeepSeek加速了。”在社交平台,有开发者评价道。也有用户认为,DeepSeek最让人佩服的点在于,模型迭代的同时,推理基础设施也在同步更新,发布V4时,连推理优化一起发,有论文也有代码,还验证了跨模型通用性。

即便近期频频传出融资消息,未来可能需要走向商业化,但通过这一开源,DeepSeek似乎在证明自己仍会坚持开源初心。

责任编辑:李曦_NN2587

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
多名院士研究发现:吃一瓣大蒜,就等于给血管添一次堵,真的假的

多名院士研究发现:吃一瓣大蒜,就等于给血管添一次堵,真的假的

汪医生健康百科
2026-06-25 20:25:06
知恩图报?顶流网红莫氏鸡煲公开感谢千万粉博主:带火我,债还清

知恩图报?顶流网红莫氏鸡煲公开感谢千万粉博主:带火我,债还清

雷科技
2026-06-26 15:04:39
黄牛掏空退休金买了500份《GTA6》!自信一定会血赚

黄牛掏空退休金买了500份《GTA6》!自信一定会血赚

游民星空
2026-06-26 23:06:18
iPhone 18 Pro Max曝光:灵动岛暴瘦35,苹果正面设计四年首变

iPhone 18 Pro Max曝光:灵动岛暴瘦35,苹果正面设计四年首变

小柱解说游戏
2026-06-25 02:56:49
一起来看看——国际米兰右边翼卫引援位置潜在目标征集结果

一起来看看——国际米兰右边翼卫引援位置潜在目标征集结果

狗哥是一名内拉
2026-06-27 23:26:53
法国40℃高温禁空调,民众怒斥生活条件不如中国农村猪

法国40℃高温禁空调,民众怒斥生活条件不如中国农村猪

梁岱爱玩车
2026-06-27 18:08:06
这个小国比朝鲜还神秘,5毛一升油,水电全免费,却是女性的噩梦

这个小国比朝鲜还神秘,5毛一升油,水电全免费,却是女性的噩梦

抽象派大师
2026-06-26 00:56:10
18岁被王全安选中,20岁登戛纳,后来为啥没人敢用她?

18岁被王全安选中,20岁登戛纳,后来为啥没人敢用她?

不似少年游
2026-05-21 14:26:19
马云再开金口?2026下半年,手里有存款的人,或将面临2大挑战?

马云再开金口?2026下半年,手里有存款的人,或将面临2大挑战?

平说财经
2026-06-27 20:08:45
张稀哲重伤,1-0!北京队虽双线3连胜,两大队长却受伤

张稀哲重伤,1-0!北京队虽双线3连胜,两大队长却受伤

北门儿
2026-06-27 22:01:05
法国主力中场引全豪门争抢,维埃拉:其综合实力碾压楚阿梅尼

法国主力中场引全豪门争抢,维埃拉:其综合实力碾压楚阿梅尼

夜白侃球
2026-06-27 09:40:55
最后的疯狂:许家印被抓捕的失控三秒钟

最后的疯狂:许家印被抓捕的失控三秒钟

财经保探长
2026-04-09 22:30:38
发现没有?超市、菜市场已出现大怪现象,值得每个人深思

发现没有?超市、菜市场已出现大怪现象,值得每个人深思

混沌录
2026-06-27 17:06:37
再说一次,不要选错城市

再说一次,不要选错城市

国民经略
2026-06-26 11:45:54
挤破头的985突然不香了!这届家长集体转向,抢着给孩子报211专业

挤破头的985突然不香了!这届家长集体转向,抢着给孩子报211专业

户外阿毽
2026-06-27 07:53:55
闲着没事,你抓什么特务,吃饱了撑的!

闲着没事,你抓什么特务,吃饱了撑的!

雨秋闲话
2026-06-26 11:28:46
轻松一刻:别人夸你孩子懂事的话,这并不是夸奖~

轻松一刻:别人夸你孩子懂事的话,这并不是夸奖~

莱月昂
2026-06-27 22:37:58
继续清理工资!雷霆将强力投手送往活塞,只得到两个未来次轮签?

继续清理工资!雷霆将强力投手送往活塞,只得到两个未来次轮签?

稻谷与小麦
2026-06-28 00:05:13
黎笋长子:父亲下定决心对华开战前确认三件事,缺其一便不会打仗

黎笋长子:父亲下定决心对华开战前确认三件事,缺其一便不会打仗

唠叨说历史
2026-06-18 16:19:19
莫家蝶速率和体能超吴艳妮,不摔或跑12秒85,若专攻短跨上限极高

莫家蝶速率和体能超吴艳妮,不摔或跑12秒85,若专攻短跨上限极高

杨华评论
2026-06-27 21:44:43
2026-06-28 00:24:49
第一财经资讯 incentive-icons
第一财经资讯
第一财经官方账号
257416文章数 622818关注度
往期回顾 全部

科技要闻

GPT-5.6发布,你暂时用不了!Mythos也放行

头条要闻

打击中东美军多个目标后 伊朗最高领袖军事顾问表态

头条要闻

打击中东美军多个目标后 伊朗最高领袖军事顾问表态

体育要闻

世界杯最火门将,站到了阿根廷和梅西面前

娱乐要闻

四提白玉兰终封后,杨紫:仍觉不真实

财经要闻

OpenAI推迟IPO重创软银!

汽车要闻

搭载华为乾崑ADS 5 全新猛士M817上市售29.99万起

态度原创

家居
房产
教育
手机
军事航空

家居要闻

绿意盎然 自然之境

房产要闻

全国高考大放水,300分就能上本科!论上岸率,海南没输过!

教育要闻

太求稳了!高考678分考生要放弃C9保专业,西安交大也不愿意选

手机要闻

存储疯涨下 7999元X Fold6杀疯!vivo黄韬:对新机销量有信心 比上代至少30%增长

军事要闻

黎以美达成三方框架协议

无障碍浏览 进入关怀版