网易首页 > 网易号 > 正文 申请入驻

DeepSeek最新大模型瞄准了下一代国产AI芯片

0
分享至

机器之心报道 编辑:泽南、杜伟

软件+硬件的全链路国产 AI 体系来了?

这几天,不论国内国外,人们都在关注 DeepSeek 发布的 V3.1 新模型。

它采用了全新的混合推理架构,让模型能在一个统一框架内支持「思考」与「非思考」两种模式。V3.1 通过训练后优化,在工具使用与编程、搜索等智能体任务上表现均获得了较大提升。

Deepseek V3.1 的很多基准测试结果已经陆续在 SWE-bench 等榜单上出现。此外,新模型在 Aider 多语言编程基准测试中得分超越了 Anthropic 的 Claude 4 Opus,同时还有显著的成本优势。

与 DeepSeek 自己此前的模型相比,V3.1 的性能提升显著,它解决问题需要更多步骤,但经过了思维链压缩训练,在任务表现持平的情况下,token 消耗量可以减少 20-50%,因此有效成本与 GPT-5 mini 相当。

除了模型性能的提升之外,值得关注的是,DeepSeek 昨天在其微信公众号文章介绍 DeepSeek V3.1 的时候,特意回复指出,UE8M0 FP8 是针对即将发布的下一代国产芯片设计的机制

这就引发了人们的很多猜想。

根据 Hugging Face 的介绍文档,DeepSeek V3.1 的模型参数量为 685B,其在训练过程中采用了 UE8M0 FP8 缩放浮点格式,以确保与微缩放浮点格式的兼容性。

其中,E 和 M 分别代表指数(Exponent)和尾数(Mantissa)的位数,U 表示无符号(Unsigned),可能针对激活值的非负特性优化。因此,UE8M0 可能是指新模型应用的特殊量化策略。

所谓 FP8,其全称为 8-bit floating point(8 位浮点数),是一种超低精度的数据表示格式,用于深度学习中的训练与推理。相较于 FP32(单精度)或 FP16(半精度)等传统浮点格式,FP8 的主要优势包括如下,因此可以在尽量保持数值稳定性和模型精度的前提下,进一步降低存储和计算开销:

  • 显著节省显存,比如 FP32 占 4 字节,FP16 占 2 字节,而 FP8 仅占 1 字节。当推理规模达到百亿甚至千亿参数时,节省极为可观;

  • 提升计算效率,FP8 可以在硬件上实现更高的并行度,比如 NVIDIA Hopper GPU 的 FP8 Tensor Core 吞吐量是 FP16 的两倍;

  • 保持模型精度,FP8 通过缩放因子以及混合精度训练,在多数场景下能接近 FP16/FP32 的精度。

近年来,除了 NVIDIA 之外,Meta、英特尔、AMD 等也都开始研究 FP8 训练与推理,有成为业界「新黄金标准」的趋势,核心思路在于「两个格式配合使用」。此次,DeepSeek V3.1 此次采用 UE8M0 FP8,意味着其开始在 FP8 技术栈上做自主创新。

从传统浮点数的表示来看,UE8M0 没有符号位和尾数位,8bit 全部用在了指数位

根据很多人的猜测,UE8M0 只能表示非负数,将覆盖非常大的正数范围或者零;8bit 全部用于指数,代表了极宽的范围,尤其适合处理梯度、激活值等跨数量级变化极大的数据;没有尾数,代表了数值精度极低(在某个指数范围内无法表达中间值),误差也可能非常大。

此外,根据前文提到的要兼容微缩放浮点格式,这种格式的思路是在小块数据中引入外部缩放因子来补偿精度。因此 UE8M0 也可能采用这种思路,从而在国产芯片中实现低比特宽度存储和快速计算。

而在国内,包括华为、寒武纪在内多家厂商的新一代 AI 芯片都可以支持 FP8 格式,这也让它们再次成为业界和资本圈关注的焦点。其中华为提出的 HiFloat8 (HiF8)方案通过「单一格式 + 锥形精度(tapered precision)」的思路,能够兼顾精度和范围,覆盖正向和反向传播。

最后,很多人可能依然好奇,DeepSeek V3.1 是使用国产芯片训练的吗?

毕竟 DeepSeek R2 越来越近了,前几天英国《金融时报》的报道刚刚「预热」过一波:


上周四,FT 说 DeepSeek R2 延迟是因为其使用了国产芯片进行训练,DeepSeek 随即否认。

目前看来,在 DeepSeek V3.1 上使用国产芯片训练的概率还比较小,UME8 M0 应该是为国产推理芯片优化所使用的机制。

不过既然 DeepSeek 这回已经明确指出了,我们可以期待未来国产开源大模型,针对华为昇腾、寒武纪等 AI 芯片实现专门优化,并大规模应用。


https://www.reuters.com/world/china/chinese-ai-startup-deepseek-releases-upgraded-model-with-domestic-chip-support-2025-08-21/

https://www.ft.com/content/eb984646-6320-4bfe-a78d-a1da2274b092

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
色字头上一把刀!知名女星曝陈小春“猛料” ,好男人人设崩塌?

色字头上一把刀!知名女星曝陈小春“猛料” ,好男人人设崩塌?

她时尚丫
2026-04-23 22:01:25
万万没想到,当着特朗普的面,77岁的老国王给了美国人一个下马威

万万没想到,当着特朗普的面,77岁的老国王给了美国人一个下马威

娱说瑜悦
2026-04-30 15:24:30
U17女足亚洲杯中国女足6-0大胜缅甸女足,刘雨希传射建功

U17女足亚洲杯中国女足6-0大胜缅甸女足,刘雨希传射建功

懂球帝
2026-05-01 21:31:32
浓眉又要被交易,湖人捡漏机会来了!紫金军团可卖5人打造四巨头

浓眉又要被交易,湖人捡漏机会来了!紫金军团可卖5人打造四巨头

锅子篮球
2026-05-01 22:01:00
香港知名女星暴瘦成纸片人!被传因拜狐仙,成为一代性感女神

香港知名女星暴瘦成纸片人!被传因拜狐仙,成为一代性感女神

仙味少女心
2026-03-11 18:58:41
上海医保新政落地!5月起配药这部分费用提高了

上海医保新政落地!5月起配药这部分费用提高了

看看新闻Knews
2026-05-01 13:24:05
爷爷过世请假奔丧被公司开除,法院判了

爷爷过世请假奔丧被公司开除,法院判了

极目新闻
2026-05-01 17:05:11
7岁女孩独自走6公里上学,只有小狗相伴引发关注。

7岁女孩独自走6公里上学,只有小狗相伴引发关注。

一丝不苟的法律人
2026-04-27 14:58:35
北京首钢21分大胜!赵睿正式复出,威廉姆斯表现出色,冲击总冠军

北京首钢21分大胜!赵睿正式复出,威廉姆斯表现出色,冲击总冠军

体坛瞎白话
2026-05-01 08:38:58
合同到期!CBA超级外援恐遭多支球队哄抢,本赛季场均狂砍27+5+5

合同到期!CBA超级外援恐遭多支球队哄抢,本赛季场均狂砍27+5+5

老叶评球
2026-05-01 17:33:03
无缘世锦赛4强,收获8强,扣除上缴台协,赵心童奖金还剩多少?

无缘世锦赛4强,收获8强,扣除上缴台协,赵心童奖金还剩多少?

观察鉴娱
2026-05-01 08:43:25
62339人,大连英博主场上座人数再创新高,位列中超历史第3

62339人,大连英博主场上座人数再创新高,位列中超历史第3

懂球帝
2026-05-01 20:49:19
中国花2000万买个航母空壳?乌专家曾言:光4个发动机就超2000万

中国花2000万买个航母空壳?乌专家曾言:光4个发动机就超2000万

素衣读史
2026-04-29 21:55:54
特朗普发布图片,将霍尔木兹海峡更名为“特朗普海峡”;伊朗外长:使用任何虚假名称来指代霍尔木兹海峡都是“可怕的错误”

特朗普发布图片,将霍尔木兹海峡更名为“特朗普海峡”;伊朗外长:使用任何虚假名称来指代霍尔木兹海峡都是“可怕的错误”

台州交通广播
2026-05-02 00:27:46
5米大车越来越多,一个新问题藏不住了,很多燃油车已“受伤”

5米大车越来越多,一个新问题藏不住了,很多燃油车已“受伤”

小李车评李建红
2026-04-29 08:00:03
性欲越强,寿命越短?这4个生理冷知识,男女最好早点知道

性欲越强,寿命越短?这4个生理冷知识,男女最好早点知道

健康科普365
2026-04-29 16:25:07
才陷性交争议!9头身女神遭传「已婚生子」真实近况曝光

才陷性交争议!9头身女神遭传「已婚生子」真实近况曝光

ETtoday星光云
2026-04-29 17:28:09
71.5%!历史性暴跌,以贷养贷的泡沫崩了

71.5%!历史性暴跌,以贷养贷的泡沫崩了

月满大江流
2026-04-16 13:54:38
杨洋王楚然分手的真相!

杨洋王楚然分手的真相!

八卦疯叔
2026-04-29 11:27:15
广东G2赛前,谁注意胡明轩?首次动员强调团体,全场做到表率作用

广东G2赛前,谁注意胡明轩?首次动员强调团体,全场做到表率作用

篮球资讯达人
2026-05-02 00:28:36
2026-05-02 01:27:00
Ai学习的老章 incentive-icons
Ai学习的老章
Ai学习的老章
3364文章数 11144关注度
往期回顾 全部

科技要闻

DeepSeek发布多模态论文又连夜删除

头条要闻

美国也搞起"人肉代购" "去墨西哥买中国车"教程疯传

头条要闻

美国也搞起"人肉代购" "去墨西哥买中国车"教程疯传

体育要闻

无奈!约基奇:这要在塞尔维亚 全队早被炒了

娱乐要闻

马筱梅产后身材恢复超好 现身户外直播

财经要闻

GPU神话松动,AI真正的战场变了

汽车要闻

限时9.67万起 吉利星越L/星瑞i-HEV智擎混动上市

态度原创

房产
健康
教育
游戏
时尚

房产要闻

所有户型全卖爆!海口TOP级豪宅,景观样板间五一全线开放!

干细胞治烧烫伤面临这些“瓶颈”

教育要闻

高考作文遇见反躺平:提倡奋斗,反对躺平

索尼新作又搞同性恋被喷!玩家盘点“女同角色”吐槽

这个夏天,彩色裤子又火了!

无障碍浏览 进入关怀版