网易首页 > 网易号 > 正文 申请入驻

DeepSeek联手北大清华放大招,吞吐量暴涨1.87倍,1152个GPU集群已跑通验证

0
分享至

2月27日,DeepSeek团队联合北京大学、清华大学共同发表了一篇学术论文,聚焦大模型在智能体场景下的推理性能优化问题。该论文提出了一个名为DualPath的创新推理系统,通过重新设计底层数据加载架构,为日益复杂的AI智能体工作负载提供高效的系统级解决方案。

根据论文披露的数据,DualPath系统通过引入"双路径读取KV-Cache"机制,重新分配集群内存储网络负载,在离线推理场景中将吞吐量最高提升1.87倍,在线服务场景下每秒智能体运行数平均提升1.96倍。该系统已在包含1152个GPU的大规模生产集群上完成验证,支持DeepSeek-V3.2 660B等大参数量模型的部署。

论文指出,当前大模型正从单轮对话机器人和独立推理模型,快速演进为能够自主规划、调用工具并通过多轮交互解决实际任务的智能体系统。这种应用范式的转变,推动推理工作负载从传统的人类与大模型之间的交互,转向人类、大模型与环境三方之间的交互,交互轮次可达数十甚至数百轮。在这种多轮短追加的模式下,历史上下文的KV-Cache命中率通常超过95%,系统性能的决定性因素不再是GPU算力本身,而是从存储中加载缓存数据的效率。

现有主流的预填充与解码分离架构存在结构性瓶颈——预填充引擎的存储网卡带宽被大量KV-Cache读取占满,而解码引擎的存储带宽却大量闲置。DualPath的核心思路是在传统的存储到预填充路径之外,新增一条"存储到解码再到预填充"的加载通道,通过动态分配两条路径的数据流量,将集群内所有引擎的存储网卡聚合为全局资源池,从根本上打破单节点I/O的限制。

值得注意的是,这篇论文发布的时间节点恰逢业界对DeepSeek下一代旗舰模型V4的高度期待。与此同时,智能体正成为大模型行业竞争的核心方向。中信证券研报指出,AI应用场景从简单对话向AI智能体升级,单次任务token消耗呈指数级上升,token的爆发式增长本质上反映出AI推理需求的指数级扩容。在这一背景下,DeepSeek选择将研究方向投向推理系统的底层优化,为智能体大规模落地铺设基础设施层面的技术路径。

声明:市场有风险,投资需谨慎。本文为AI基于第三方数据生成,仅供参考,不构成个人投资建议。

本文源自:市场资讯

作者:观察君

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
科内:齐达内的技术储备最让我震撼,他让所有人都充满信心

科内:齐达内的技术储备最让我震撼,他让所有人都充满信心

懂球帝
2026-09-30 18:28:11
赵本山分红拿大头被骂多年,赵四直播道出真相:只看到他吃肉,没看见他挨打

赵本山分红拿大头被骂多年,赵四直播道出真相:只看到他吃肉,没看见他挨打

财叔
2026-09-30 16:30:20
国家对胖东来的态度

国家对胖东来的态度

小虎新车推荐员
2026-09-27 01:16:29
与恩师反目成仇,为什么刘国梁要重点培养王楚钦?

与恩师反目成仇,为什么刘国梁要重点培养王楚钦?

小禾的体育
2026-08-23 19:25:14
王钰栋谈“马竞战舞”庆祝动作:觉得好玩,大家挺喜欢看这些

王钰栋谈“马竞战舞”庆祝动作:觉得好玩,大家挺喜欢看这些

懂球帝
2026-09-30 22:36:09
罗马官宣迪巴拉加盟,莫利纳留守特里戈里亚

罗马官宣迪巴拉加盟,莫利纳留守特里戈里亚

灰度测试中
2026-09-30 07:04:19
东风导弹泄密案中,间谍郭万钧一家三口均被依法执行死刑

东风导弹泄密案中,间谍郭万钧一家三口均被依法执行死刑

人生录
2026-06-17 20:53:45
2027年将会是中华人民共和国全党、全军、全国各族人民重要的一年

2027年将会是中华人民共和国全党、全军、全国各族人民重要的一年

铁锤侃侃而谈
2026-09-12 00:54:59
中央高压严查,多地机关事业单位大整顿启动,这几类人受影响最大

中央高压严查,多地机关事业单位大整顿启动,这几类人受影响最大

细说职场
2026-09-30 14:51:09
人人增收,农业农村部重磅宣告:农村房屋可出租,宅基地要盘活了

人人增收,农业农村部重磅宣告:农村房屋可出租,宅基地要盘活了

墨兰史书
2026-09-30 21:10:04
网传江苏高考接近满分记叙文《衬衫的价格为 9 镑 15 便士》火了

网传江苏高考接近满分记叙文《衬衫的价格为 9 镑 15 便士》火了

夏夏回来了随见
2026-09-30 18:59:51
44万人欠信用卡,银行连官司都懒得打了

44万人欠信用卡,银行连官司都懒得打了

知肇分子
2026-09-04 23:43:57
金鹰奖这夜,得罪郭德纲的朱亚文,终于扬眉吐气口碑暴涨

金鹰奖这夜,得罪郭德纲的朱亚文,终于扬眉吐气口碑暴涨

吃青菜长高
2026-09-30 15:07:43
美国资深战略家一语点破:道出中国困境危机,值得中国人细细深思

美国资深战略家一语点破:道出中国困境危机,值得中国人细细深思

草莓信箱
2026-10-01 02:10:33
全市场:国米近10年出售青训球员累计进账2.349亿欧

全市场:国米近10年出售青训球员累计进账2.349亿欧

懂球帝
2026-10-01 00:44:17
集体拉升!美联储,加息预期生变

集体拉升!美联储,加息预期生变

证券时报
2026-09-30 21:42:11
毛阿敏“人设崩塌”!守刘欢病床前,帮料理后事,恶毒标签该散了

毛阿敏“人设崩塌”!守刘欢病床前,帮料理后事,恶毒标签该散了

旧史新谭
2026-09-30 18:30:57
2分钟内骤降5000多米,迪拜航空客机副机长刀刺机长欲撞毁飞机,被机组和乘客制服,安全降落后乘客鼓掌欢呼,画面曝光;多方回应

2分钟内骤降5000多米,迪拜航空客机副机长刀刺机长欲撞毁飞机,被机组和乘客制服,安全降落后乘客鼓掌欢呼,画面曝光;多方回应

台州交通广播
2026-10-01 01:28:37
医生发现,凡是老年斑多的人,大多都有这3个共性,注意观察

医生发现,凡是老年斑多的人,大多都有这3个共性,注意观察

健康之光
2026-08-05 17:30:07
网红溜溜凳翻车后续!商家晒检测报告:所检项目符合标准;此前罗永浩回应“劣质溜溜凳” 事件,并点名俞敏洪

网红溜溜凳翻车后续!商家晒检测报告:所检项目符合标准;此前罗永浩回应“劣质溜溜凳” 事件,并点名俞敏洪

金融界
2026-09-29 13:58:58
2026-10-01 03:56:49
金融界 incentive-icons
金融界
投资者信赖的财经金融门户网站
10258025文章数 546996关注度
往期回顾 全部

科技要闻

OpenAI凌晨大上新!新助手dots迎战Muse

头条要闻

美国著名演员史泰龙发声:我糟蹋了自己的身体

头条要闻

美国著名演员史泰龙发声:我糟蹋了自己的身体

体育要闻

30天30队·火箭:乌度卡的控制欲

娱乐要闻

胡歌现身游本昌遗体告别仪式

财经要闻

“杭州六小龙”迎来价值重估

汽车要闻

燃油车的最佳平替 长城大狗HEV简单好开更经济

态度原创

本地
游戏
家居
艺术
公开课

本地新闻

中秋逛白塔寺,体验国医妙荟雅集

《秋叶原迷踪》制作人专访:倾注全部心血的诚意之作"/> 主站 商城 论坛 自运营 登录 注册 简体中文 简体中文 English 《秋叶原迷踪》...

家居要闻

2026建博会(广州) 公装联探展交流活动

艺术要闻

不服来辩!这些山水画,才是中国画的真正巅峰!

公开课

李玫瑾:为什么性格比能力更重要?

无障碍浏览 进入关怀版