网易首页 > 网易号 > 正文 申请入驻

DeepSeek最新论文:如何让大模型跑得更快?梁文锋署名

0
分享至

当行业在讨论谁的模型更聪明时,DeepSeek仍然把目光投向更现实的问题:如何让模型更快。

6月27日,DeepSeek官方在Github低调更新了一篇最新论文,介绍其推理加速框架DSpark,试图解决大语言模型在高并发场景下的推理效率瓶颈。

从作者署名来看,这篇论文由DeepSeek与北京大学联合发布,DeepSeek创始人梁文锋也位列作者名单。在论文中,团队开源了DSpark模型权重,并同步发布了面向推测解码、由算法驱动的训练代码仓库DeepSpec。


DeepSeek最新论文截图

此次论文仍是DeepSeek一贯的技术派风格,论文标题就较为晦涩——《DSpark:基于置信度调度的半自回归生成推测解码》(《DSpark:Confidence-Scheduled Speculative Decoding with Semi-Autoregressive Generation》)。

在论文中,DeepSeek首先解释了需要解决的问题。大语言模型采用自回归方式生成文本:每一个新词元(token)的生成,都需要基于全部前置词元完成一次完整前向传播,结果是输出越长,等待越久。由此带来GPU利用率低下、用户等待时间过长的问题,这是大语言模型线上服务的核心性能瓶颈,在实时对话助手、多轮智能体工作流等低时延敏感场景中尤为突出。

目前的主流方案分为自回归草稿模型(Eagle3)、并行草稿模型(DFlash)两条路线,二者各有缺陷,包括生成质量瓶颈和系统效率瓶颈等,且现有方案均缺乏负载自适应校验机制。

基于此,DeepSeek提出DSpark推测解码框架,采用半自回归架构,通过两套互补机制,解决草稿生成与校验环节的权衡矛盾,将高吞吐并行生成与自适应负载感知校验机制融为一体。

根据论文,在数学推理、代码生成、日常闲聊三类任务的受控离线基准测试中,相较于自回归草稿模型与并行草稿模型,Dspark框架能够大幅提升单轮平均可接受词元长度。

DeepSeek已经将DSpark部署到DeepSeek-V4在线服务系统中,并基于真实用户流量评估其实际性能。结果显示,相较于现有生产环境基线系统MTP-1,在相同吞吐量条件下,DSpark将用户端生成速度提升了60%-85%。

此外,DeepSeek也将这一框架部署在其他模型上,以阿里旗下的Qwen3-4B、8B、14B三个模型为例,相较于自回归草稿模型,DSpark平均单轮可接受词元长度分别提升了30.9%、26.7%、30%;相较于并行草稿模型,DSpark分别提升了16.3%、18.4%、18.3%。

从技术角度来看,这篇论文的主要价值在于,通过算法创新显著提升了模型的推理生成速度。在当前大模型行业逐渐走向落地的背景下,谁能更便宜、更快速地输出结果,也是一项重要的竞争力。此外,通过开源,DeepSeek也再次推动了社区发展。

“AI Infra再次被DeepSeek加速了。”在社交平台,有开发者评价道。也有用户认为,DeepSeek最让人佩服的点在于,模型迭代的同时,推理基础设施也在同步更新,发布V4时,连推理优化一起发,有论文也有代码,还验证了跨模型通用性。

即便近期频频传出融资消息,未来可能需要走向商业化,但通过这一开源,DeepSeek似乎在证明自己仍会坚持开源初心。

责任编辑:李曦_NN2587

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
南非发生排外暴力事件 我使馆提醒公民加强防范

南非发生排外暴力事件 我使馆提醒公民加强防范

新京报
2026-10-10 17:01:17
曼联vs热刺:阿马德-迪亚洛、约罗首发,索兰克、萨维奥出战

曼联vs热刺:阿马德-迪亚洛、约罗首发,索兰克、萨维奥出战

懂球帝
2026-10-10 23:54:04
社保缴费22年7个月,个人账户8.24万,湖北武汉退休,没有视同缴费年限能拿多少钱?

社保缴费22年7个月,个人账户8.24万,湖北武汉退休,没有视同缴费年限能拿多少钱?

平静话社保
2026-09-21 09:02:44
2-2!凯恩助攻梅开二度,格纳布里失绝杀,拜仁4球被吹无缘登顶

2-2!凯恩助攻梅开二度,格纳布里失绝杀,拜仁4球被吹无缘登顶

我的护球最独特
2026-10-10 23:37:36
剑南春|切尔西5-1伯恩茅斯,亨德森世界波两射一传,佩德罗双响

剑南春|切尔西5-1伯恩茅斯,亨德森世界波两射一传,佩德罗双响

懂球帝
2026-10-11 00:05:46
八大元老薄一波,到底是正国级还是副国级?终于说清楚了

八大元老薄一波,到底是正国级还是副国级?终于说清楚了

阿离家居
2026-10-09 09:21:25
大众新车官宣:10月12日,正式上市!

大众新车官宣:10月12日,正式上市!

科技堡垒
2026-10-09 12:19:30
朝鲜战场最难以启齿的一幕:一名年仅17岁的女卫生员为了把战友从死亡线上拉回来,不得不跨越常人难以想象的羞耻底线

朝鲜战场最难以启齿的一幕:一名年仅17岁的女卫生员为了把战友从死亡线上拉回来,不得不跨越常人难以想象的羞耻底线

回京历史梦
2026-10-07 04:00:07
基莱斯:这场胜利对我们意义非凡,球队处境比之前更好了

基莱斯:这场胜利对我们意义非凡,球队处境比之前更好了

懂球帝
2026-10-10 22:48:59
你也被掉包了?萨卡全场0过人14次丢球权,终场前错失绝佳单刀

你也被掉包了?萨卡全场0过人14次丢球权,终场前错失绝佳单刀

懂球帝
2026-10-10 21:57:59
48年西柏坡,毛主席问陈毅谁当上海市长合适,陈毅:反正我不想当

48年西柏坡,毛主席问陈毅谁当上海市长合适,陈毅:反正我不想当

老殁体育解说
2026-10-09 09:40:34
小勒布伦莫雷加德出局!松岛辉空守住世界第一,男单四强出炉

小勒布伦莫雷加德出局!松岛辉空守住世界第一,男单四强出炉

排球黄金眼
2026-10-10 15:36:15
男子花3万买二手奥迪,洗车发现后排座椅高10公分,拆开直接报警

男子花3万买二手奥迪,洗车发现后排座椅高10公分,拆开直接报警

罪案洞察者
2025-07-14 16:05:54
特朗普:与普京通话非常成功,柴油价格将大幅下跌;普京:俄愿向美国及全球市场供应石油和石油产品

特朗普:与普京通话非常成功,柴油价格将大幅下跌;普京:俄愿向美国及全球市场供应石油和石油产品

极目新闻
2026-10-10 08:20:23
意外!U23国足主力门将李昊结束亚运会征程,首次亮相新去处

意外!U23国足主力门将李昊结束亚运会征程,首次亮相新去处

振刚说足球
2026-10-10 10:39:43
为何红军到了陕北,蒋介石的几十万大军就不死追了,这是为什么?

为何红军到了陕北,蒋介石的几十万大军就不死追了,这是为什么?

千秋文化
2026-01-15 22:38:14
人伦大乱,正在毁掉中国家庭,四种乱象就在家里,别装看不见

人伦大乱,正在毁掉中国家庭,四种乱象就在家里,别装看不见

涵豆说娱
2026-10-08 01:31:06
中型SUV预售13.78万起!双零重力座椅+车载冰箱,车长4900mm

中型SUV预售13.78万起!双零重力座椅+车载冰箱,车长4900mm

沙雕小琳琳
2026-10-10 14:26:25
对谈判过程表示失望,尼克斯内线球星估计很难得到续约合同了?

对谈判过程表示失望,尼克斯内线球星估计很难得到续约合同了?

稻谷与小麦
2026-10-11 00:05:16
iPhone 20:苹果直接跳过19,明年这台二十周年纪念机,变化大到离谱!

iPhone 20:苹果直接跳过19,明年这台二十周年纪念机,变化大到离谱!

明美无限
2026-10-08 20:20:46
2026-10-11 00:23:00
第一财经资讯 incentive-icons
第一财经资讯
第一财经官方账号
268733文章数 623780关注度
往期回顾 全部

科技要闻

上世纪成熟的踏板,为何今天还会断裂?

头条要闻

港媒:梅艳芳骨灰被盗三个月无线索 歌迷会公开求助

头条要闻

港媒:梅艳芳骨灰被盗三个月无线索 歌迷会公开求助

体育要闻

十年回首:湖人三榜眼的夏天,与NBA无关

娱乐要闻

宋佳一串三大满贯 争议随之而来

财经要闻

双汇因抗生素超标共被罚1.29亿元

汽车要闻

千匹马力+三把锁/顶配能浮水 银河战舰700限时焕新价16.98万起

态度原创

手机
教育
家居
本地
数码

手机要闻

iPhone Duo专属仪式感!苹果门店将支持定制开机Hello界面文字

教育要闻

“考一半,突然通知全国考试取消”

家居要闻

2026建博会(广州) 公装联探展交流活动

本地新闻

踏访沙县第一村,寻国民小吃本源

数码要闻

长城推出KING 1050W全模组钛金牌电源:10年质保,1799元

无障碍浏览 进入关怀版