网易首页 > 网易号 > 正文 申请入驻

Meta开源Llama 4,正面迎战 DeepSeek!经过重新设计,首次采用MoE

0
分享至

Meta 今日发布了首批 Llama 4 系列模型:Llama 4 Scout 和 Llama 4 Maverick。

据报道,此前 DeepSeek 发布的开源模型(如 R1 和 V3)在性能上与 Meta 之前的旗舰 Llama 模型相当甚至更优,促使 Meta 加快了 Llama 4 的研发节奏。为应对竞争,Meta 内部曾设立“作战室”以深入研究 DS 如何实现更低成本的模型部署与运行。如今,Llama 4 与 V3 在性能上的对比依然是业内关注的焦点。

Meta GenAI负责人在X上表示,本次发布标志着 Llama 系列的全面重构完成。他表示,此次推出的是 Llama 4 系列中首批开源模型,代表了该系列发展的又一重要里程碑。本次发布的主要亮点有:

Llama 4 系列在架构层面进行了全面升级,采用先进的专家混合(MoE,Mixture-of-Experts)架构,并在原生多模态任务上进行了联合训练。此次发布包括 Llama 4 Scout 和 Llama 4 Maverick,同时也首次预览了更强大的 Llama 4 Behemoth。

Llama 4 Scout 是目前性能最强的小型模型,拥有 170 亿活跃参数和 16 个专家模块。该模型具备出色的推理速度,原生支持多模态,具备强大的智能能力,支持业界领先的 1000 万以上 token 上下文窗口,并且可在单张 GPU 上运行。

Llama 4 Maverick 是当前同类中最强的多模态模型,在多个公开评测中超越 GPT-4o 和 Gemini 2.0 Flash,在推理和编程任务上与 DeepSeek v3 表现相当,同时活跃参数不到其一半。该模型在性能与成本比方面表现出色,其实验性对话版本在 LMArena 榜单中获得 1417 的 ELO 分数,并且也可在单机环境中运行。

Meta 还预览了 Llama 4 系列中性能最强的模型 —— Llama 4 Behemoth,该模型在多个 STEM 基准测试中超过 GPT-4.5、Claude Sonnet 3.7 和 Gemini 2.0 Pro。Llama 4 Behemoth 目前仍在训练中,Meta 表示将持续披露其更多细节。

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
年赚1.6亿,法网却吞蛋出局!郑钦文的滑落,是命中注定

年赚1.6亿,法网却吞蛋出局!郑钦文的滑落,是命中注定

曹老师评球
2026-05-27 08:53:35
国家能源局:把算力与电力协同发展抓实抓好

国家能源局:把算力与电力协同发展抓实抓好

澎湃新闻
2026-05-27 07:47:03
中储粮集团西安分公司党委书记戴中文接受审查调查

中储粮集团西安分公司党委书记戴中文接受审查调查

界面新闻
2026-05-27 10:01:21
李显龙访华后划清界限:在商言商不是共同族群,别把我们当自己人

李显龙访华后划清界限:在商言商不是共同族群,别把我们当自己人

叹为观止易
2026-05-28 01:32:34
三星One UI8.5国行版本全面推送:升级关10个设置,流畅度暴涨35%

三星One UI8.5国行版本全面推送:升级关10个设置,流畅度暴涨35%

小柱解说游戏
2026-05-28 01:54:14
多名院士调查发现:吃一口久冻馒头,等于中一次毒?真假

多名院士调查发现:吃一口久冻馒头,等于中一次毒?真假

医学科普汇
2026-05-27 20:00:13
79岁特朗普体检3小时后,结果出人意料

79岁特朗普体检3小时后,结果出人意料

璀璨幻行者
2026-05-27 12:14:29
俄动用榛树导弹,精确打击基辅,冯德莱恩:是莫斯科绝望的表现

俄动用榛树导弹,精确打击基辅,冯德莱恩:是莫斯科绝望的表现

影孖看世界
2026-05-25 14:05:41
5000美元享2.5万美元服务?伊朗战事中星链猛涨价,美国防部与SpaceX吵开了

5000美元享2.5万美元服务?伊朗战事中星链猛涨价,美国防部与SpaceX吵开了

红星新闻
2026-05-27 13:29:31
国际原油期货结算价收跌超5%

国际原油期货结算价收跌超5%

每日经济新闻
2026-05-28 05:24:10
网友爆料!吴梦洁微创手术顺利完成,这次排协终于坦诚透明

网友爆料!吴梦洁微创手术顺利完成,这次排协终于坦诚透明

金毛爱女排
2026-05-27 10:16:25
百亿元级私募机构已率先加仓

百亿元级私募机构已率先加仓

澎湃新闻
2026-05-27 07:54:15
新书披露“黎巴嫩寻呼机爆炸”内幕:行动差点被伊朗发现,摩萨德将健身房改成组装线

新书披露“黎巴嫩寻呼机爆炸”内幕:行动差点被伊朗发现,摩萨德将健身房改成组装线

红星新闻
2026-05-26 19:18:13
拒绝听命特朗普,美联储新主席宣誓,对华态度曝光,中方再抛美债

拒绝听命特朗普,美联储新主席宣誓,对华态度曝光,中方再抛美债

靓仔情感
2026-05-27 00:48:42
“碳水脸”引争议,网友:令人不适的网络词!

“碳水脸”引争议,网友:令人不适的网络词!

中国日报
2026-05-21 15:28:00
你们都是什么时候对男女之事开窍的?网友:果然还是拦不住有心人

你们都是什么时候对男女之事开窍的?网友:果然还是拦不住有心人

夜深爱杂谈
2026-02-21 21:37:02
中国情侣跑到日本便利店门口跳舞,本以为美美出片,结果被日网友骂上热搜……

中国情侣跑到日本便利店门口跳舞,本以为美美出片,结果被日网友骂上热搜……

日本物语
2026-05-26 21:51:31
家长因孩子调座反复投诉威胁,小学女老师选择硬刚将家长告上法庭

家长因孩子调座反复投诉威胁,小学女老师选择硬刚将家长告上法庭

观世记
2026-05-27 16:38:57
善恶有报!许家印刚认罪1天,子女近况曝光,大儿子的安排全白费

善恶有报!许家印刚认罪1天,子女近况曝光,大儿子的安排全白费

历史伟人录
2026-05-10 22:06:40
与女星同居12年,多次求婚被拒,转身娶世界冠军定居香港儿女双全

与女星同居12年,多次求婚被拒,转身娶世界冠军定居香港儿女双全

白面书誏
2026-05-25 20:34:59
2026-05-28 06:44:49
InfoQ incentive-icons
InfoQ
有内容的技术社区媒体
12434文章数 51909关注度
往期回顾 全部

科技要闻

韬定律:全球在卷纳米数 华为换了一把尺子

头条要闻

特朗普:伊朗即使放弃高浓缩铀也无法获得解除制裁

头条要闻

特朗普:伊朗即使放弃高浓缩铀也无法获得解除制裁

体育要闻

这群老阿姨,是最硬核的马刺球迷

娱乐要闻

王鹤棣风波连累父亲炸串店遭差评?

财经要闻

中国半导体的阳谋

汽车要闻

限时补贴价9.28-10.98万 MG 4X正式上市

态度原创

艺术
时尚
本地
教育
手机

艺术要闻

蚂蚁新总部封顶了!大圆环到底有啥魔力,科技公司都抢着用?

这几件单品太火了,今年流行的风格都离不开它

本地新闻

用剪纸的方式,打开江苏扬州

教育要闻

数轴动点第1讲,一个视频学会!

手机要闻

苹果iPhone Fold折叠屏手机首批第三方保护壳亮相

无障碍浏览 进入关怀版