网易首页 > 网易号 > 正文 申请入驻

DeepSeek开源周来了!网友:纯粹的工程设计,爱死它了!

0
分享至

2月21日,DeepSeek宣布即将开源5个核心代码库,并高调喊出“没有象牙塔,只有车库创新”。

今天一早,DeepSeek就履行了承诺,开源了针对 Hopper GPU 的高效 MLA 解码内核——FlashMLA!

这场名为“开源周”的技术狂欢,火爆程度可见一斑!

当“车库文化”

撞上数学最优解

当硅谷巨头们还在用天价硬件和闭源代码筑起AI技术的“高墙”时,DeepSeek却在自家“车库”里玩起了数学魔术——他们用开源代码撬动算力杠杆,用模型架构革新挑战行业铁律。

不仅是代码的共享,更像是一场数学建模的思维革命。

这让人联想到乔布斯在车库里组装第一台苹果电脑的历史,但DeepSeek的“车库”里堆的不是电路板,而是数学公式和算法参数。

他们的底气来自哪里?

答案藏在DeepSeek-V3的技术报告中:一个6710亿参数的混合专家模型(MoE),仅用558万美元成本训练完成,性能却对标GPT-4o和Claude-Sonnet-3.5。

这是什么概念?

这么说吧,就相当于用拼dd的预算,造出了法拉利的引擎。

这里面展示了数学建模的“模”法:

参数效率革命:每个token仅激活37亿参数,通过“多头潜在注意力(MLA)”压缩键值缓存,将推理内存占用降低到传统模型的1/10。 负载均衡策略:用动态偏差项调节专家负载,无需辅助损失函数,让模型在训练中自动寻找均衡点——这简直是微分方程在分布式计算中的完美应用。 FP8混合精度:首次在超大规模模型验证FP8训练,将GPU内存占用和计算成本“暴力打折”。

海内外网友辣评:硅谷大佬们还在烧钱堆H100,DeepSeek已经用H800玩出了“参数经济学”。

一位网友调侃说,提高显卡效率,但是拜托别烧坏我的英伟达股票!

另一位运行项目的网友更是大加赞美:纯粹的工程设计,爱死它了!

打破垄断的“数学三板斧”

成本函数重构:从“堆硬件”到“拼算法”

传统AI竞赛遵循“算力增长指数>模型性能对数”的残酷规律,但DeepSeek用数学证明:优化目标函数比堆显卡更管用。

他们的训练框架通过DualPipe算法减少流水线气泡,让通信开销隐藏于计算中,最终实现278.8万GPU小时完成训练——这相当于用北京五环一套房的价格,造出了AI领域的“环球金融中心”。

概率分布的“降维打击”

在MoE架构中,DeepSeek引入“无token丢弃”策略,通过序列级平衡损失函数,让每个专家节点的负载分布趋近均匀。

这种基于概率密度的动态调节,让模型在14.8万亿token的预训练中全程零回滚——堪称分布式系统的“大数定律实践课”。

多token预测的“时空折叠”

用multi-token预测(MTP)目标函数,让模型同时学习未来多个时间步的分布。

这相当于在时间轴上做并行采样,将推理速度提升30%。

这招简直是把Transformer的时间维度压成了希尔伯特空间里的超平面!

开源背后的“纳什均衡”

DeepSeek的开源策略绝非慈善行为,而是一场精心计算的博弈论实践:

打破信息不对称

通过开放5个核心库,将社区开发者变成“分布式计算节点”,用集体智慧降低边际研发成本。

构建生态壁垒

当DeepSeek-V3成为开源社区的事实标准,闭源巨头的定价权将彻底瓦解——这招“用开源打闭源”,堪比数学中的反证法。

成本转嫁红利

企业用户用1/10成本获得80%性能,而DeepSeek通过生态服务盈利——完美符合“帕累托最优”。

*帕累托最优指的是在资源配置过程中,任何改变都不能使至少一个人的境况变坏,同时至少有一个人的境况得到改善。这种状态被称为帕累托最优,因为它代表了资源分配的最优状态,即没有更好的资源配置方式,任何改进都是不可能的。

也就是说,当OpenAI还在收会员费时,DeepSeek已经玩起了“开源即服务”的微分博弈。

中国AI的“勒贝格积分”之路

与硅谷巨头执着于“黎曼求和”式的渐进改良不同,DeepSeek选择了一条更激进的路径:

在测度空间重构问题,用中文事实性知识优势,在SimpleQA中文基准碾压GPT-4o——这是语言模型的勒贝格积分,用本土化数据重新定义“测度”。

在无穷维空间找解,28K上下文长度扩展,让模型学会在超长序列中捕捉关联性——像极了泛函分析中的紧算子逼近。

正如《金融时报》所言:“不是每个司机都需要法拉利,但DeepSeek让所有人都开上了方程式赛车。”

DeepSeek开源周最颠覆的,不是某个模型架构,而是一种信仰:AI不应是少数人的“黑箱神学”,而应是数学普惠的“开源福音”。

当代码在GitHub上流淌,当公式在论文中共享,我们每个人都是这场革命的变量因子。

撰文:超模君

编辑:小天

参考文献来源:

DeepSeek开源周官宣. 新京报, 2025-02-21

DeepSeek-R1模型颠覆成本结构. 新华社, 2025-01-28

开源冲击技术垄断. 中国日报, 2025-02-05

DeepSeek-V3技术报告解读. CSDN博客, 2025-02-06

大家好,这是【超模君】项目的主理人中大数学博士【大Lee】的个人Vlog视频号,欢迎大家关注我的视频号。

喜欢《数学有什么用系列》记得关注超模君Vlog,点赞和点小爱心哦,

一路坚持,靠的是大家!

在这里我会争取日更(大家可以监督),一天一个主题。

在视频号,分享知识,见解,生活碎片,以及家庭生活的日常花絮。

最近在做【优质国货赋能】【安全产品溯源】。也欢迎大家一起做云股东和云监工。

也希望大家可以一起留言互相讨论分享进步。

点击长按关注

简介:超模君,数学与交叉科学教育自媒体博主,中大数学博士,有俩崽崽和一洁癖的太太。爱分享有用的数学建模知识,爱深挖有趣的交叉科学人物故事,爱为靠谱的现代教育、提升幸福感的产品打call。著有《芥子须弥·大科学家的小故事》、《数学之旅:闪耀人类的54个数学家》、《漫画数学:闪耀人类的54个数学家》、《一份钟数学》(已售罄)、《薛定谔的猫:漫画大科学家的小萌宠》(已售罄)、超模君幽灵魔方、超模君丙烯马克笔等广受大人与孩子们喜爱的作品。

在这里,超模君不定期会有脑洞大开,和你分享一些新研发出来的,小而美的,有故事的,有知识的理工创意产品,期待与您分享。

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
长江:你“禁渔”让我歇十年,我把活化石从地底下刨出来送给你

长江:你“禁渔”让我歇十年,我把活化石从地底下刨出来送给你

启迪你的思维
2026-07-03 04:38:23
成都将全力保障川藏铁路、雅下水电等重大工程建设

成都将全力保障川藏铁路、雅下水电等重大工程建设

第一财经资讯
2026-07-08 18:50:42
中国音乐家李梳曈在纽约路边换胎时被撞身亡,年仅35岁,留下妻子和仅1岁的孩子

中国音乐家李梳曈在纽约路边换胎时被撞身亡,年仅35岁,留下妻子和仅1岁的孩子

大象新闻
2026-02-26 13:45:03
全网哗然!一封举报信干翻小红书千亿上市梦,这波“家丑”外扬有点狠

全网哗然!一封举报信干翻小红书千亿上市梦,这波“家丑”外扬有点狠

雷科技
2026-07-08 16:07:00
94岁原中央保健局局长王敏清:50年没感冒,无三高,靠的就是这几招

94岁原中央保健局局长王敏清:50年没感冒,无三高,靠的就是这几招

新浪财经
2026-06-24 02:28:33
美伊再次互相打击,外交部:重燃战火不符合任何一方的利益

美伊再次互相打击,外交部:重燃战火不符合任何一方的利益

澎湃新闻
2026-07-08 15:14:26
宗馥莉穿吊带裙坐劳斯莱斯

宗馥莉穿吊带裙坐劳斯莱斯

新浪财经
2026-07-06 23:05:43
《问心2》十大美女排名:张佳宁第四,毛晓彤第三,第一实至名归

《问心2》十大美女排名:张佳宁第四,毛晓彤第三,第一实至名归

蹲坑看世界
2026-07-07 10:33:05
特雷-杨社媒欢迎艾顿:让我们开始工作吧 大个子

特雷-杨社媒欢迎艾顿:让我们开始工作吧 大个子

北青网-北京青年报
2026-07-08 20:43:21
短短一年炎症变癌症?提醒:患上这5种炎症,千万别拖

短短一年炎症变癌症?提醒:患上这5种炎症,千万别拖

芹姐说生活
2026-07-06 14:57:33
德约怒刷一批新纪录,鏖战5小时晋级温网4强,笑称羡慕梅西只用踢90分钟

德约怒刷一批新纪录,鏖战5小时晋级温网4强,笑称羡慕梅西只用踢90分钟

极目新闻
2026-07-08 13:39:31
主持人李思思:我这辈子最正确的决定,就是为初恋丈夫生下孩子

主持人李思思:我这辈子最正确的决定,就是为初恋丈夫生下孩子

闲娱十扒
2026-06-11 11:20:18
46万粉丝二手车商一夜爆雷,展厅清空,数十家车商追款约2000万

46万粉丝二手车商一夜爆雷,展厅清空,数十家车商追款约2000万

金融界
2026-07-07 17:06:50
刚刚南通一声巨响,你们听到了吗?

刚刚南通一声巨响,你们听到了吗?

濠河神聊
2026-07-08 15:35:21
朱熹问学生:为何叫“买东西”不是“买南北”?10岁孩童一语道破

朱熹问学生:为何叫“买东西”不是“买南北”?10岁孩童一语道破

浩渺青史
2026-07-02 03:44:26
大连市三家超牛的社区医院,医术不输三甲,当地人都称赞。

大连市三家超牛的社区医院,医术不输三甲,当地人都称赞。

刘哥谈体育
2026-07-05 12:46:25
刚刚确认:10级!这波太猛,湖北人提前准备

刚刚确认:10级!这波太猛,湖北人提前准备

新浪财经
2026-07-08 19:32:10
李嘉诚曹德旺可能说对了!2026年不买房,5年后会庆幸还是后悔?

李嘉诚曹德旺可能说对了!2026年不买房,5年后会庆幸还是后悔?

丁丁鲤史纪
2026-06-24 10:40:34
为了阻止我支付1.5元单车费,美团煞费苦心

为了阻止我支付1.5元单车费,美团煞费苦心

晶柯喻律
2026-07-02 06:09:25
48年潍县战役司令指挥16天未果,一位文官在众人震惊中登上观察哨

48年潍县战役司令指挥16天未果,一位文官在众人震惊中登上观察哨

纪实文录
2025-06-11 17:11:27
2026-07-08 22:28:49
超级数学建模
超级数学建模
专业数学建模、数据挖掘自媒体
8189文章数 99464关注度
往期回顾 全部

科技要闻

独家对话小红书IPO举报风波当事人

头条要闻

北约秘书长"告白"特朗普:就喜欢他 他对伊开战是对的

头条要闻

北约秘书长"告白"特朗普:就喜欢他 他对伊开战是对的

体育要闻

阿根廷被埃及埋了一半,死里逃生

娱乐要闻

鹿晗出轨?邓超出轨绯闻又被扒出

财经要闻

新能源车"外挂电池"乱象:暗藏致命风险

汽车要闻

定名岚图梦想家9!岚图全新旗舰MPV来袭

态度原创

亲子
家居
旅游
公开课
军事航空

亲子要闻

哥哥带妹妹坐过山车,妹妹瞬间变脸,从兴奋欢呼到害怕想哭

家居要闻

2026建博会(广州) 公装联探展交流活动

旅游要闻

从“城市绿肺”到“夜间新宠”,北京公园经济点亮夏夜

公开课

李玫瑾:为什么性格比能力更重要?

军事要闻

特朗普:美伊谅解备忘录“已终结”

无障碍浏览 进入关怀版