网易首页 > 网易号 > 正文 申请入驻

Meta重回开源模型赛道!高速Token、单卡跑300亿参数,性能基本不减!

0
分享至

Meta 重回开放权重 AI 模型赛道——这一大型语言模型(LLM)细分领域由它开创,却曾因优先级错位而大体搁置。此次归来相当高调:刚发布的开放权重模型 Muse Glimmer 用了不少巧思,既确保模型能塞进单块消费级 GPU,又能以极快速度响应查询。


Meta 借助蒸馏使 Muse Glimmer 能装进单块消费级 GPU,并用一款微型伴生模型加快响应


Meta刚发布了Muse Glimmer,这是一款300亿参数的开放权重AI模型,意在与谷歌Gemma 4、阿里巴巴Qwen 3.6等同类产品竞争。

为方便不熟悉这一概念的读者:权重决定模型对任一概念应赋予多大重要性,也代表该模型知识库的全部广度。

Meta 的 Muse Glimmer 有两大突出之处。其一,若以全精度(fp16)运行 300 亿参数模型,仅模型权重就大约需要 60GB 内存(30×10⁹×2)。但 Meta 采用了量化——本质上是蒸馏:由更大的模型(Muse Spark)训练更小的模型,把自身许多能力灌输进去——从而把权重内存需求压到 20GB。再加上 KV cache 所需的 2GB 到 4GB,门槛已足够低,24GB 或 32GB 的消费级显卡就能轻松跑起 Muse Glimmer。Meta称,经蒸馏做的模型压缩对性能没有可察觉影响。

其二,为加快 token 生成(也就是响应速度),Muse Glimmer 配有一款名为 DFlash drafter 的微型伴生模型,负责预测整段文本块;随后 Muse Glimmer 一次性校验答案,保留正确部分、丢弃错误部分。校验远快于从零生成,因此这一安排可显著提速:Meta公布的数据,在RTX 5090上可快3.1倍,在M5 Max1.8倍,在M4 Max1.5倍。

当然,对西方开放权重 AI 模型格局来说,Muse Glimmer 的到来时机再合适不过。据 OpenRouter 数据,中国大语言模型的周 token 量近期首次突破 34.25 万亿,其中 DeepSeek 的 V4 Flash 周环比增长高达 570%。

根据 OpenRouter 最新数据集(对应自 8 月 3 日当周),全球 AI 模型用量达 69 万亿 token ,周环比上升 21.48% 。其中中国模型贡献 34.25 万亿,美国模型仅 9.17 万亿。关键在于:这已是中国模型连续第十五周领跑全球用量。

IDAS2026 IC设计自动化产业峰会

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
中国将迎来“死亡高峰”根本不是天灾,全是几代人种下的因果

中国将迎来“死亡高峰”根本不是天灾,全是几代人种下的因果

阿晪美食
2026-08-07 19:54:04
令英国痛苦的“入侵花”,在中国沦为咸菜,吃到人工种植成笑谈

令英国痛苦的“入侵花”,在中国沦为咸菜,吃到人工种植成笑谈

抽象派大师
2026-08-08 14:48:54
福布斯曝光NBA和MLB的差距!为何受众更多的NBA赚钱能力拼不过MLB

福布斯曝光NBA和MLB的差距!为何受众更多的NBA赚钱能力拼不过MLB

体坛八点半的那些事儿
2026-08-10 09:18:16
赔了夫人又折兵!以为能骂周星驰无儿无女,没成想自己先“翻车”

赔了夫人又折兵!以为能骂周星驰无儿无女,没成想自己先“翻车”

林雁飞
2026-08-02 22:50:16
山东省人大常委会决定

山东省人大常委会决定

天下泉城
2026-08-11 09:50:27
乱了!日本领土危机浮现!不光是琉球,原来连北海道都不是日本的

乱了!日本领土危机浮现!不光是琉球,原来连北海道都不是日本的

小影的娱乐
2026-08-10 17:21:01
江浙沪多地特大暴雨破纪录,“巴威”重生之这一世我叫“白海豚”

江浙沪多地特大暴雨破纪录,“巴威”重生之这一世我叫“白海豚”

静水流深003
2026-08-11 12:15:44
陶铸女儿问曾志:你怨不怨毛主席?她回答:毛主席晚年是一个老人!

陶铸女儿问曾志:你怨不怨毛主席?她回答:毛主席晚年是一个老人!

舆图看世界
2026-08-10 15:10:03
10万入场费的“换妻”盛宴:记者冒死暗访,组织者3年狂赚2亿

10万入场费的“换妻”盛宴:记者冒死暗访,组织者3年狂赚2亿

说点事
2026-07-16 11:29:11
比日本还嚣张!为支持台湾和中国断交后,还要求中国主动低头求和

比日本还嚣张!为支持台湾和中国断交后,还要求中国主动低头求和

谁将笑到最后
2026-08-10 20:58:08
全球独一份的巨婴外交!印度一边反华排华,一边找中国要超国民待遇

全球独一份的巨婴外交!印度一边反华排华,一边找中国要超国民待遇

浪子的烟火人间
2026-08-10 08:55:06
刘永红已任四川省农业科学院党委书记

刘永红已任四川省农业科学院党委书记

掌上金牛
2026-08-11 12:52:07
印尼高层喝假酒了?直接喊话中国:你们出钱出力,给我们修条路!

印尼高层喝假酒了?直接喊话中国:你们出钱出力,给我们修条路!

随遇而安之心
2026-08-10 19:17:49
两性关系:如果还想多活几年,70岁以后必须牢记这几句

两性关系:如果还想多活几年,70岁以后必须牢记这几句

荔子言
2026-06-05 23:10:00
狗咬人被摔死,狗主人带9人上门打砸遭老人反杀,算不算正当防卫

狗咬人被摔死,狗主人带9人上门打砸遭老人反杀,算不算正当防卫

易玄
2026-08-05 08:15:35
反击战名将廖锡龙:坚持举报总后勤部副部长谷俊山,结果如何?

反击战名将廖锡龙:坚持举报总后勤部副部长谷俊山,结果如何?

我不是沃神
2026-08-09 06:45:03
世界杯金球得主拒绝皇马,巴萨中场补强瞄准1人罗德里

世界杯金球得主拒绝皇马,巴萨中场补强瞄准1人罗德里

日常碎碎念啊
2026-08-11 13:20:21
欧美为何掀起“排印浪潮”?

欧美为何掀起“排印浪潮”?

观察者网
2026-08-11 08:25:04
妻儿众目睽睽之下溺亡:男子打躬作揖没用,网络还谴责他不去送死

妻儿众目睽睽之下溺亡:男子打躬作揖没用,网络还谴责他不去送死

中原医生
2026-08-09 13:32:01
邹市明和冉莹颖开的拳馆,前员工甩出账目明细:300万水晶灯来自表弟,800万装修进了表妹公司,450万安保费包给外甥,70万绿植钱归亲哥

邹市明和冉莹颖开的拳馆,前员工甩出账目明细:300万水晶灯来自表弟,800万装修进了表妹公司,450万安保费包给外甥,70万绿植钱归亲哥

黎兜兜
2026-08-11 08:12:16
2026-08-11 13:39:00
EETOP半导体社区 incentive-icons
EETOP半导体社区
国内著名的电子工程师社区
8030文章数 15700关注度
往期回顾 全部

科技要闻

AI大战变天:扎克伯格突然回头

头条要闻

女生独闯南太行山遗体在悬崖下方被找到 遗物公开

头条要闻

女生独闯南太行山遗体在悬崖下方被找到 遗物公开

体育要闻

NBA老顽童,抽着大麻喝着小酒告别了

娱乐要闻

“易烊千玺影帝加冕:00后的崛起!

财经要闻

北京楼市新政落地,观望客开始入场

汽车要闻

搭载猎鹰500/限时售10.49万起 2027款艾瑞泽8PRO上市

态度原创

游戏
本地
时尚
公开课
军事航空

《黑袍纠察队》爆头女主演腾讯新3A 还演过《COD》

本地新闻

黄州一夜,苏轼写给普通人的月光

陈都灵:在虚实之间,静候一朵水晶玫瑰的盛开

公开课

李玫瑾:为什么性格比能力更重要?

军事要闻

乌克兰袭击俄罗斯炼油厂 已致13死78伤

无障碍浏览 进入关怀版