网易首页 > 网易号 > 正文 申请入驻

一张算力卡日入6000块? DeepSeek开源赚钱焚决了

0
分享至


不是,梁文峰你怎么什么都往外掏啊。

模型开源就算了,什么叫推理框架,内部账本全都公开了。

明摆着告诉你,手把手跟上的话,一张卡一天就能收米 6100 块。


要知道,即使是现在最贵的 B300,租一个小时也就不到 60 块 ( 9 刀 )。

妥妥的印钞机啊。

靠着这番操作,滑动变阻器的评级估计又要调回梁圣了,因为他是真的想教会大家怎么用 AI 来赚钱,别影响他们做 AGI。


那问题来了,这回开源的推理框架到底是个啥呢?

简单点理解,如果把大模型比作一家餐厅,那么闭源模型就只公开了菜单,你点啥菜,它上啥菜,菜是怎么做出来的, 谁也不知道。

开源模型,就是餐厅把自己做菜的菜谱公开了出来,大家都能照着菜谱做菜,但做出来的菜能还原到几成水平,就得看你自己的火候了。


而这次 DeepSeek 开源出来的推理框架,就好比一整个记录做菜过程的 4K 120 帧蓝光高清杜比原盘视频。

不但拍下了做菜的每一个步骤,就连用什么灶、买哪儿的菜、甚至炒菜要颠几下勺都给你记录下来了,生怕你学不会。

过去很多模型公司都有开源模型的权重,但是很多第三方厂商拿了这些开源模型后,却发现怎么也做不出官方的味道,要么是成本压不下来,要么是模型效果不太行。

这其中差的,就是推理框架这些具体的细节经验。


于是 DeepSeek 索性开源开到底,除了开源推理框架DeepInfer,让算力集群能高效运行,顺手还配了套DeepSeek Recipe,方便各种第三方 API 都能正确跟 DeepSeek 交流。

更贴心的是,考虑到硬件不同,人还把华为和英伟达的适配都一起搞定了,真就是手把手的懒人教程。


咱先来讲这个 DeepInfer,说说它是怎么把 GPU 性能榨干的。

首先,为了算力输出更稳定,它构造了一条 GPU 和 CPU 分工合作的流水线。

以前 GPU 每算完一轮,还得等 CPU 处理结果、安排下一批任务,中间免不了摸鱼。


现在改成了 GPU 算这一轮的时候,CPU 就提前准备下一批任务,双方交叉干活,无缝衔接。

除此之外,GPU 内部也被分成了两拨,8 卡的小机器负责读取输入,64~128 卡的超级节点则专门处理输出,并行效率彻底拉满。

果然,想要从寸土寸金的显卡上薅羊毛,一秒都不能空转呐。


但话说回来,流水线再怎么连轴转,也架不住模型本质上还是个词语接龙机,token 只能一个一个往外蹦。

诶,那就不能一回多吐几个么?

能的兄弟,能的。DeepSeek 听罢掏出了祖传绝活:提前猜答案。

这套手艺早在 DeepSeek V3 的时候就引入了,那时候叫 MTP,多 Token 预测,就是让小模型先多猜几个 Token,再让主模型核查,对的留,错的扔。


今年七月份又来了波升级,发布了 DSpark,批量生成草稿,提升预测的数量,又优化了核查验证的算法。

这回就更彻底了,索性手把手教你到底怎么验证更省事儿。

主要就是靠这个Confidence Head,置信度预测头,提前给这些 token 预估个靠谱程度。

靠谱的多查,不靠谱的就少查几个,不必每次查到底。

测试下来,相比之前老老实实挨个查,减少了足足 30% 的工作量,提高了 4%~7% 的 token 吞吐。

属于是牙缝里都给你抠出个鸡腿。


当然,除了计算发力,负责缓存的老熟人KV Cache也是重头戏。

咱都知道,V4.1 Flash 出厂时,硬盘里的缓存占用压缩到了前代的八分之一。

除了压缩策略发大力,还用到了一项叫SWA Bounded Replay( 有界回放 ) 的技术。

这玩意儿设计相当巧妙,能直接帮服务器省下海量的硬盘和带宽。


以前大模型为了让自己在聊天的时候不失忆,会把长期记忆和短期记忆都给一股脑的塞到脑子里,直接把脑子给塞爆了。

现在用上了 SWA 有界回放,就可以把脑子里最占地方的局部记忆给先丢了,等到要用的时候再光速计算出来恢复一下。

这一改,处理输入的计算量直接砍半,省钱省到了极致。


当然,DeepInfer 牛批,另一套 DeepSeek Recipe 同样不能低估。

之前咱们用开源模型,很容易遇到个怪事:明明是同一个型号的模型,接到不同平台和工具里,跑出来的味道却不太一样。

这是因为大模型对输入的格式极其敏感,现在市面上 OpenAI、Anthropic 等各家接口的标准五花八门。

在转换时哪怕错一个特殊字符、多一个空格,模型的思考逻辑和工具调用就会当场乱套。


这次的 DeepSeek Recipe 就是来大一统的。

甭管你是 Codex 发来的 Responses API,还是 Claude Code 用的 Messages API,它都能转成适合 DeepSeek 的格式。

让你在自己家里部署,也能像官方原版的丝滑体验看齐。


当然了,DeepSeek 这次其实稍微藏了一手,后面还会继续更新。

人在公告里也直说了,由于推理系统中的 KVCache 管理与负载均衡组件因与内部基础设施耦合较深,相关代码目前尚未完整开源。

这也意味着现在开源出来的这些代码,其实更利好于软件芯片厂商来做调试,或者是利好中小企业开发者来做自己的私有化部署。


但是对同样规模的云服务大厂和直接竞争对手来说,就有点不够用了。

毕竟把几十张卡的性能榨干是一回事,怎么把机房里成千上万张卡串起来、在亿级并发下做全局调度和缓存复用,又是另一回事。

不过哪怕只有现在这些,从底层算子到双平台适配的 DeepInfer,也足够芯片厂商和开发者们爽吃一阵子了。

最后只能说,千言万语,感谢梁圣开源了。

撰文:早起 & 风华

编辑:早起 & 江江 & 面线

美编:焕妍

图片、资料来源:

知乎@DeepSeek、东方卫视、微信公众号@DeepSeek、GitHub、部分图源网络


特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
利拉德回归25+6开拓者轻取太阳,杨瀚森5分2板莫兰特14+8

利拉德回归25+6开拓者轻取太阳,杨瀚森5分2板莫兰特14+8

湖人崛起
2026-10-22 12:27:50
苍井空公开承认南京大屠杀:我在上学时学到过,一切的根源都在于战争

苍井空公开承认南京大屠杀:我在上学时学到过,一切的根源都在于战争

不掉线电波
2026-10-21 12:22:08
高市早苗上任一年4次会面特朗普!5500亿投资、稀土矿双手奉上…日本正在被高市掏空!

高市早苗上任一年4次会面特朗普!5500亿投资、稀土矿双手奉上…日本正在被高市掏空!

可达鸭面面观
2026-10-21 16:47:34
越算越紧的养老账!企业职工养老保险八成靠保险费,机关事业单位四成靠财政补贴

越算越紧的养老账!企业职工养老保险八成靠保险费,机关事业单位四成靠财政补贴

可达鸭面面观
2026-10-20 17:18:44
难以置信!网传一女子发布婚内保证书,自述抖音结识异性发生不当关系,引发轩然大波

难以置信!网传一女子发布婚内保证书,自述抖音结识异性发生不当关系,引发轩然大波

火山詩话
2026-10-22 08:15:35
难以置信!一博主称晒车附车主信息发帖同城交友,一日收到13位女生私信,直言“5个质量不错”

难以置信!一博主称晒车附车主信息发帖同城交友,一日收到13位女生私信,直言“5个质量不错”

火山詩话
2026-10-22 07:35:45
33岁中国外卖员在伦敦送餐,被69岁英国亿万富豪看中:怀上孩子,我就娶你!“你要是能怀孕,我们就结婚。”

33岁中国外卖员在伦敦送餐,被69岁英国亿万富豪看中:怀上孩子,我就娶你!“你要是能怀孕,我们就结婚。”

扶苏聊历史
2026-10-21 18:05:26
浓眉34+12+4奇才末节逆转雄鹿开门红,吹杨20分13助攻状元缺席

浓眉34+12+4奇才末节逆转雄鹿开门红,吹杨20分13助攻状元缺席

湖人崛起
2026-10-22 09:43:05
张嘉益好友聚餐,70岁陈宝国仍有胸肌,二叔满脸通红,抽100的烟

张嘉益好友聚餐,70岁陈宝国仍有胸肌,二叔满脸通红,抽100的烟

小椰的奶奶
2026-10-22 05:04:05
北京大学党委原常委、纪委书记、中文系原副主任、党总支书记闵开德教授逝世

北京大学党委原常委、纪委书记、中文系原副主任、党总支书记闵开德教授逝世

双一流高校
2026-10-22 01:10:25
小卡回归首秀23+6!猛龙43分狂胜公牛 巴恩斯23+6+5四人轰20+

小卡回归首秀23+6!猛龙43分狂胜公牛 巴恩斯23+6+5四人轰20+

醉卧浮生
2026-10-22 10:26:53
旭日旗进境外课堂,陈宇昕家境曝光,南京方面如何回应?

旭日旗进境外课堂,陈宇昕家境曝光,南京方面如何回应?

平老师666
2026-10-21 21:14:14
“公奔私”先行者,知名私募大佬病逝,年仅57岁

“公奔私”先行者,知名私募大佬病逝,年仅57岁

财联社
2026-10-21 20:46:02
不查不知道,一查吓一跳!披旗的南京精日分子陈宇昕,私下有多壕

不查不知道,一查吓一跳!披旗的南京精日分子陈宇昕,私下有多壕

北海史记
2026-10-21 19:09:56
泽连斯基:愿在保留75%领土控制权的基础上达成和平协议

泽连斯基:愿在保留75%领土控制权的基础上达成和平协议

界面新闻
2026-10-21 19:47:20
什么时候我们连讨论一起车祸起火的资格都没有了?

什么时候我们连讨论一起车祸起火的资格都没有了?

魔都囡
2026-10-22 03:05:45
“精日”留学生已被遣送回国,南京警方表态:这不是小事!

“精日”留学生已被遣送回国,南京警方表态:这不是小事!

仕道
2026-10-22 11:43:40
70名中国留学生在泰国被骗近200万元!新骗局曝光

70名中国留学生在泰国被骗近200万元!新骗局曝光

扬子晚报
2026-10-22 07:29:30
宇树H2-X机器人举起汽车救人引热议!网友:有点儿期待今年春晚了

宇树H2-X机器人举起汽车救人引热议!网友:有点儿期待今年春晚了

快科技
2026-10-22 09:28:10
南京警方回应“留学生在国外身披旭日旗”事件:收到数百起举报,有专门部门处理,“这不是小事”

南京警方回应“留学生在国外身披旭日旗”事件:收到数百起举报,有专门部门处理,“这不是小事”

大风新闻
2026-10-21 22:57:10
2026-10-22 12:43:00
差评XPIN incentive-icons
差评XPIN
用知识和观点Debug the world!
11702文章数 489894关注度
往期回顾 全部

科技要闻

腾讯云谷歌紧急行动!互联网安全出大事

头条要闻

伊朗伊斯兰革命卫队发言人:我们准备推出"炸弹之父"

头条要闻

伊朗伊斯兰革命卫队发言人:我们准备推出"炸弹之父"

体育要闻

热闹的NBA回来了,他却倒在新赛季大门口

娱乐要闻

杜淳王灿近况曝光:铁婚六年甜上热搜

财经要闻

为卖房,有房企花20万拍短剧

汽车要闻

有七座/续航提升 领克900L曝光还可选双色车身+大饼轮毂

态度原创

家居
游戏
艺术
旅游
军事航空

家居要闻

2026建博会(广州) 公装联探展交流活动

《AKIBA LOST(秋叶原迷踪)》Steam版因审核等原因延期后,于今日10月21日正式上线!

艺术要闻

20幅 俄罗斯当代画家Vladimir Smakovsky风景油画

旅游要闻

最是橙黄橘绿时,南京“最美600米”斑斓上线

军事要闻

泽连斯基"愿以领土换和平协议" 普京表态

无障碍浏览 进入关怀版