网易首页 > 网易号 > 正文 申请入驻

DeepSeek再次震惊全球:一天到底能赚多少钱?官方突然宣布!

0
分享至

突然宣布!暂停DeepSeek API服务

【导读】DeepSeek一天能赚多少钱?官方突然揭秘!潞晨科技暂停DeepSeek API

大家好,一起关注一下关于DeepSeek的最新消息!

DeepSeek首次披露:理论成本利润率545%

当市场以为DeepSeek的开源周内容发布完毕之后,3月1日,DeepSeek宣布了“One More Thing”,突然揭秘V3/R1推理系統,公开了大规模部署成本和收益。

根据《DeepSeek-V3/R1推理系统概览》的文章,假定GPU租赁成本为2美元/小时,总成本为87072美元/天;如果所有tokens全部按照DeepSeek R1的定价计算,理论上一天的总收入为562027美元/天,成本利润率为545%。

据官方披露,DeepSeek-V3/R1推理系统的优化目标是:更大的吞吐,更低的延迟。

为了实现这两个目标,DeepSeek使用大规模跨节点专家并行(Expert Parallelism / EP)。首先EP使得batch size大大增加,从而提高GPU矩阵乘法的效率,提高吞吐。其次EP使得专家分散在不同的GPU上,每个 GPU 只需要计算很少的专家(因此更少的访存需求),从而降低延迟。

但EP同时也增加了系统的复杂性。复杂性主要体现在两个方面:

EP引入跨节点的传输。为了优化吞吐,需要设计合适的计算流程使得传输和计算可以同步进行。

EP涉及多个节点,因此天然需要Data Parallelism(DP),不同的DP之间需要进行负载均衡。

因此,DeepSeek介绍了如何使用EP增大batch size,如何隐藏传输的耗时,如何进行负载均衡。

大规模跨节点专家并行(Expert Parallelism / EP)

由于DeepSeek-V3/R1的专家数量众多,并且每层256个专家中仅激活其中8个。模型的高度稀疏性决定了必须采用很大的overall batch size,才能给每个专家提供足够的expert batch size,从而实现更大的吞吐、更低的延时。需要大规模跨节点专家并行(Expert Parallelism / EP)。

采用多机多卡间的专家并行策略来达到以下目的:

Prefill:路由专家EP32、MLA和共享专家DP32,一个部署单元是4节点,32个冗余路由专家,每张卡9个路由专家和1个共享专家。

Decode:路由专家EP144、MLA和共享专家DP144,一个部署单元是18 节点,32个冗余路由专家,每张卡2个路由专家和1个共享专家。

计算通信重叠

多机多卡的专家并行会引入比较大的通信开销,所以使用了双batch重叠来掩盖通信开销,提高整体吞吐。

对于prefill阶段,两个batch的计算和通信交错进行,一个batch在进行计算的时候可以去掩盖另一个batch的通信开销;

对于decode阶段,不同阶段的执行时间有所差别,所以把attention部分拆成了两个stage,共计5个stage的流水线来实现计算和通信的重叠。

尽可能地负载均衡

由于采用了很大规模的并行(包括数据并行和专家并行),如果某个GPU的计算或通信负载过重,将成为性能瓶颈,拖慢整个系统;同时其他GPU因为等待而空转,造成整体利用率下降。因此需要尽可能地为每个GPU分配均衡的计算负载、通信负载。

  1. PrefillLoadBalancer

    1. 核心问题:不同数据并行(DP)实例上的请求个数、长度不同,导致core-attention计算量、dispatch发送量也不同。

    2. 优化目标:各GPU的计算量尽量相同(core-attention计算负载均衡)、输入的token数量也尽量相同(dispatch发送量负载均衡),避免部分GPU处理时间过长。

  2. DecodeLoadBalancer

    1. 核心问题:不同数据并行(DP)实例上的请求数量、长度不同,导致core-attention计算量(与KVCache占用量相关)、dispatch发送量不同。

    2. 优化目标:各GPU的KVCache占用量尽量相同(core-attention计算负载均衡)、请求数量尽量相同(dispatch发送量负载均衡)。

  3. Expert-ParallelLoadBalancer

    1. 核心问题:对于给定MoE模型,存在一些天然的高负载专家(expert),导致不同GPU的专家计算负载不均衡。

    2. 优化目标:每个GPU上的专家计算量均衡(即最小化所有GPU的dispatch接收量的最大值)。

线上系统的实际统计数据

DeepSeekV3和R1的所有服务均使用H800GPU,使用和训练一致的精度,即矩阵计算和dispatch传输采用和训练一致的FP8格式,core-attention计算和combine传输采用和训练一致的BF16,最大程度保证了服务效果。

另外,由于白天的服务负荷高,晚上的服务负荷低,因此实现了一套机制,在白天负荷高的时候,用所有节点部署推理服务。晚上负荷低的时候,减少推理节点,以用来做研究和训练。在最近的24小时里(北京时间2025/02/27 12:00至2025/02/28 12:00),DeepSeek-V3和R1推理服务占用节点总和,峰值占用为278个节点,平均占用226.75个节点(每个节点为8个H800GPU)。假定GPU租赁成本为2美金/小时,总成本为87072美元/天。

在24小时统计时段内,DeepSeek-V3和R1:

输入token总数为608B,其中342Btokens(56.3%)命中KVCache硬盘缓存。

输出token总数为168B。平均输出速率为20~22tps,平均每输出一个token的KVCache长度是4989。

平均每台H800的吞吐量为:对于prefill任务,输入吞吐约73.7ktokens/s(含缓存命中);对于decode任务,输出吞吐约14.8ktokens/s。

以上统计包括了网页、APP和API的所有负载。如果所有tokens全部按照DeepSeek-R1的定价计算,理论上一天的总收入为562027美元,成本利润率为545%。当然实际上没有这么多收入,因为V3的定价更低,同时收费服务只占了一部分,另外夜间还会有折扣。

有网友将DeepSeek与OpenAI进行对比,表示:“‘成本利润率545%’,等一下,所以你是说我被OpenAI抢劫了?”

潞晨科技暂停DeepSeek API服务

就在DeepSeek披露大规模部署成本和收益之后,潞晨科技突然宣布:“尊敬的用户,潞晨云将在一周后停止提供DeepSeek API服务,请尽快用完您的余额。如果没用完,我们全额退款。”

此前2月4日晚间,华为计算微信公众号发文表示,DeepSeek-R1系列模型的开源,因其出色的性能和低廉的开发成本,已引发全球的热切讨论和关注。潞晨科技携手昇腾,联合发布基于昇腾算力的DeepSeek-R1系列推理API,及云镜像服务。

但近期潞晨科技CEO尤洋指出,满血版DeepSeek-R1每百万token(输出)定价16元,如果每日输出1000亿token,一个月算下来接入方企业可获得4800万元收入。据他测算,完成1000亿token的输出,需要约4000台搭载H800的机器,以目前H800的市价或者折旧来计算,每月仅机器成本就达4.5亿元,因此企业方可能面临每月4亿元的亏损,“用户越多,服务成本越高,亏损越多”。

3月1日下午4点,潞晨科技CEO尤洋发文回应DeepSeek公布的理论成本利润率。

公开资料显示,潞晨科技是一家致力于“解放AI生产力”的全球性企业,团队核心成员来自美国加州大学伯克利分校,斯坦福大学,清华大学,北京大学等国内外知名高校。主营业务包括分布式软件系统,大规模人工智能平台,以及企业级云计算解决方案。公司旨在打造一个开源低成本AI大模型开发系统Colossal-AI,作为深度学习框架的内核,帮助企业最大化人工智能训练效率的同时最小化人工智能的训练成本。

来源:中国基金报记者 泰勒

为伟大思想而生!

AI+时代,互联网思想(wanging0123),

第一必读自媒体

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
残暴!上海吊打山东半场领先26分 王哲林重摔丁彦雨航观战沉默

残暴!上海吊打山东半场领先26分 王哲林重摔丁彦雨航观战沉默

醉卧浮生
2026-05-09 20:32:50
光纤大利好!外资最新重仓3家低价光纤股,最高6元,最低5元

光纤大利好!外资最新重仓3家低价光纤股,最高6元,最低5元

长风价值掘金
2026-05-09 17:04:58
语音输入喊了这么多年,千问电脑版一出手就把键盘卷没了?

语音输入喊了这么多年,千问电脑版一出手就把键盘卷没了?

机器之心Pro
2026-05-08 14:15:39
梁文峰语出惊人:我雇你来,不是让你完成任务,而是让你创造价值

梁文峰语出惊人:我雇你来,不是让你完成任务,而是让你创造价值

荆楚寰宇文枢
2026-05-08 23:16:21
女子190元买榴莲“仅退款”被拘,往返1600公里讨公道的河南商家最新发声:买家才20多岁,她父母想协商和解,我要求依法处理,并公开道歉

女子190元买榴莲“仅退款”被拘,往返1600公里讨公道的河南商家最新发声:买家才20多岁,她父母想协商和解,我要求依法处理,并公开道歉

大风新闻
2026-05-09 10:00:07
“4只皮皮虾1035元”当事人否认想吃白食,删除评论;隔壁海鲜店发声

“4只皮皮虾1035元”当事人否认想吃白食,删除评论;隔壁海鲜店发声

上观新闻
2026-05-09 09:58:08
升至37死51伤!浏阳烟花厂爆炸:负责人创业历程曝光,个人照流出

升至37死51伤!浏阳烟花厂爆炸:负责人创业历程曝光,个人照流出

老猫观点
2026-05-09 18:44:54
重磅反转 曝央视砸5亿美元买近2届世界杯转播权 预计一周内签合同

重磅反转 曝央视砸5亿美元买近2届世界杯转播权 预计一周内签合同

风过乡
2026-05-09 19:57:32
华为Pura 90系列:橘色海面下,深邃的影像底蕴

华为Pura 90系列:橘色海面下,深邃的影像底蕴

爱范儿
2026-04-20 18:42:35
解放前特务用很小的电台就能向台湾发报,可如今为什么没法做到?

解放前特务用很小的电台就能向台湾发报,可如今为什么没法做到?

宅家伍菇凉
2026-05-09 09:41:53
李泽楷做错了?香港拿下世界杯转播权,官媒锐评:给内地谈判底气

李泽楷做错了?香港拿下世界杯转播权,官媒锐评:给内地谈判底气

好贤观史记
2026-05-09 18:00:07
以游客身份入境,未经许可拍摄!8名中国人在泰国拍短剧被捕

以游客身份入境,未经许可拍摄!8名中国人在泰国拍短剧被捕

大象新闻
2026-05-09 13:54:19
伦敦世乒赛:日本晋级决赛!3:0大获全胜,张本早田希娜桥本立功

伦敦世乒赛:日本晋级决赛!3:0大获全胜,张本早田希娜桥本立功

国乒二三事
2026-05-09 19:14:14
4只皮皮虾1035元,官方回应是否“带客吃回扣”

4只皮皮虾1035元,官方回应是否“带客吃回扣”

中国新闻周刊
2026-05-09 19:38:06
求救也晚了,伊朗宣布对美舰开火,话音刚落,土耳其摆出洲际导弹

求救也晚了,伊朗宣布对美舰开火,话音刚落,土耳其摆出洲际导弹

潮鹿逐梦
2026-05-09 18:49:49
女子火车上怒怼吸烟区,喊话全列禁烟却被网友嘲讽 ,12306回应

女子火车上怒怼吸烟区,喊话全列禁烟却被网友嘲讽 ,12306回应

寒士之言本尊
2026-05-08 23:19:49
捷途汽车:把「方盒子」做成冠军,把「旅行」做成生态

捷途汽车:把「方盒子」做成冠军,把「旅行」做成生态

AutoBusiness
2026-05-09 11:37:24
可靠耐用+AI全能,惠普战66 2025锐龙版深度体验

可靠耐用+AI全能,惠普战66 2025锐龙版深度体验

电脑报
2026-04-27 16:41:46
世锦赛夺冠后首战告负!吴宜泽4-5惜败希金斯,抢到赛点被三连鞭

世锦赛夺冠后首战告负!吴宜泽4-5惜败希金斯,抢到赛点被三连鞭

杨华评论
2026-05-09 17:40:26
3-0爆冷世界第五仰天怒吼!18岁天才闪耀 雷洋:法国队有冠军相

3-0爆冷世界第五仰天怒吼!18岁天才闪耀 雷洋:法国队有冠军相

颜小白的篮球梦
2026-05-09 09:29:53
2026-05-09 21:27:01
互联网思想 incentive-icons
互联网思想
AI时代,互联网思想观察
2447文章数 16909关注度
往期回顾 全部

科技要闻

美国政府强力下场 苹果英特尔达成代工协议

头条要闻

香港富豪孙女被绑架 绑匪拿到2800万后逃跑8人花11万

头条要闻

香港富豪孙女被绑架 绑匪拿到2800万后逃跑8人花11万

体育要闻

成立128年后,这支升班马首夺顶级联赛冠军

娱乐要闻

50岁赵薇脸颊凹陷沧桑得认不出!

财经要闻

多地号召,公职人员带头缴纳物业费

汽车要闻

轴距加长/智驾拉满 阿维塔07L定位大五座SUV

态度原创

教育
亲子
游戏
本地
公开课

教育要闻

2026年能“捡漏”的3所985大学,录取分数极低,性价比超高!

亲子要闻

萌星秀秀:请欣赏小萌星排练歌曲

LCK第二赛段:又是爆冷?BFX找回状态,专门搞KT?

本地新闻

用苏绣的方式,打开江西婺源

公开课

李玫瑾:为什么性格比能力更重要?

无障碍浏览 进入关怀版