网易首页 > 网易号 > 正文 申请入驻

蚂蚁集团开源Ring-2.5-1T:首个混合线性架构万亿参数思考模型

0
分享至

IT之家 2 月 13 日消息,今日,蚂蚁集团百灵大模型发布并开源首个混合线性架构的万亿参数思考模型 ——Ring-2.5-1T

据介绍,作为迈向通用智能体时代的关键步骤,团队将混合线性注意力架构在预训练和强化学习上均进行了大规模扩展,一方面利用高效的1:7 MLA + Lightning Linear Attention 架构来提升模型的思考效率和探索空间,另一方面通过扩展强化学习和智能体环境规模来提升模型的思考深度和长程执行能力。

相比此前发布的 Ring-1T,Ring-2.5-1T 在生成效率、思考深度、长程执行上均有大幅提升:

  • 高效生成:得益于高比例的线性注意力机制,在超过 32K 生成长度下,访存规模降低 10 倍以上,成吞吐提升 3 倍以上,尤其适合深度思考和长程执行的任务。
  • 深度思考:在 RLVR 基础上引入 dense reward 来反馈思考过程的严谨性,使得 Ring-2.5-1T 同时实现 IMO 2025 和 CMO 2025 的金牌水平(自测)。
  • 长程执行:通过大规模 fully-async agentic RL训练,显著提升针对复杂任务的长程自主执行能力,使得 Ring-2.5-1T 可以轻松适配 Claude Code 等智能体编程框架和 OpenClaw 个人 AI 助理。


为评估 Ring-2.5-1T 的深度思考和长程执行能力,团队选取了具有代表性的开源思考模型(DeepSeek-v3.2-Thinking、Kimi-K2.5-Thinking)和闭源 API(GPT-5.2-thinking-high、Gemini-3.0-Pro-preview-thinking-high、Claude-Opus-4.5-Extended-Thinking)作为参考。

Ring-2.5-1T 在数学、代码、逻辑等高难推理任务(IMOAnswerBench、AIME 26、HMMT 25、LiveCodeBench、ARC-AGI-V2)和智能体搜索、软件工程、工具调用等长程任务执行(Gaia2-search、Tau2-bench、SWE-Bench Verified)上均达到了开源领先水平

团队还额外测试了深度思考模式(heavy thinking mode),通过在推理过程中扩展并行思考与总结,实现测试时扩展,从而有效提升推理的深度与广度。在 IMO 2025(满分 42 分)中,Ring-2.5-1T 获得 35 分,达到金牌水平;在 CMO 2025(满分 126 分)中取得 105 分,显著高于金牌线(78 分)及国家集训队入选线(87 分)。

此外,Ling 2.5 架构在 Ling 2.0 架构基础上引入了混合线性注意力架构。通过增量训练方式,将 Ling 2.0 架构的 GQA 升级为 1:7 的 MLA + Lightning Linear 结构。具体而言,团队基于此前发布的 Ring-flash-linear-2.0 技术路线,将部分 GQA 层改造为 Lightning Linear Attention,以显著提升长程推理场景下的吞吐能力。为进一步压缩 KV Cache,将其余 GQA 层近似转换为 MLA ,并对其中的 QK Norm 、Partial RoPE 等特性进行了针对性适配,以增强Ling 2.5 架构在混合注意力架构下的表达能力。


改造后,Ring-2.5-1T 的激活参数量从 51B 提升至 63B。但在混合线性注意力架构的支持下,其推理效率相比 Ling 2.0 仍实现了大幅提升。即便与激活参数仅为 32B 的 KIMI K2 架构相比,1T 规模下的 Ling 2.5 架构在长程推理场景下的吞吐依然具有显著优势;且生成长度越长,吞吐优势越明显



不过,蚂蚁集团也提到,这一版本模型在 token efficiency 与指令遵循方面仍存在不足,在面向更真实、更复杂任务的长程执行与实际交付能力上,也仍有较大的优化空间。团队将在后续版本中持续改进上述能力,并非常期待来自社区的使用反馈与建议。目前,Ring-2.5-1T 的训练仍在持续推进中。完整技术报告将在下一版本发布后正式公开。

IT之家附地址如下:

Hugging Face:https://huggingface.co/inclusionAI/Ring-2.5-1T

ModelScope:https://modelscope.cn/models/inclusionAI/Ring-2.5-1T

Ling Studio(https://ling.tbox.cn/chat)与 ZenMux(https://zenmux.ai/)的 Ring-2.5-1T Chat 体验页和 API 服务将在近期上线。

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
告诉孩子:判断婚姻对错,只有一个简单标准

告诉孩子:判断婚姻对错,只有一个简单标准

青苹果sht
2026-03-26 06:09:17
巴萨欧战对阵马竞均在欧冠八强阶段,此前4场1胜1平2负

巴萨欧战对阵马竞均在欧冠八强阶段,此前4场1胜1平2负

懂球帝
2026-04-08 01:21:09
美国要变天了!一个比特朗普更难缠的80后,如今已掌握了共和党

美国要变天了!一个比特朗普更难缠的80后,如今已掌握了共和党

相思赋予谁a
2026-04-08 02:18:59
马筱梅想在台北买房原因曝光!心态失衡,自觉不比具俊晔和S妈差

马筱梅想在台北买房原因曝光!心态失衡,自觉不比具俊晔和S妈差

小娱乐悠悠
2026-04-07 09:20:48
贺晓龙痛批国乒后继无人,孙颖莎和王楚钦的夺冠,没有体现统治力

贺晓龙痛批国乒后继无人,孙颖莎和王楚钦的夺冠,没有体现统治力

子水体娱
2026-04-08 00:19:50
我妈常把腊肉香油搬舅舅,今年我爸不办年货,酒席一句全体哑然

我妈常把腊肉香油搬舅舅,今年我爸不办年货,酒席一句全体哑然

热心市民小黄
2026-04-07 03:01:58
美国:其实中国不可怕,要命的是中国淘汰4000年的东西他们还在用

美国:其实中国不可怕,要命的是中国淘汰4000年的东西他们还在用

凡人侃史
2026-03-29 17:32:28
国际奥委会禁止跨性别运动员参赛,美国女足传奇拉皮诺埃非常不满

国际奥委会禁止跨性别运动员参赛,美国女足传奇拉皮诺埃非常不满

懂球帝
2026-04-07 09:14:24
ESPN:安帅与巴西足协就续约达成口头协议,他的助教将涨薪

ESPN:安帅与巴西足协就续约达成口头协议,他的助教将涨薪

懂球帝
2026-04-07 23:14:19
你们都是什么时候对男女之事开窍的?网友:果然还是拦不住有心人

你们都是什么时候对男女之事开窍的?网友:果然还是拦不住有心人

夜深爱杂谈
2026-02-21 21:37:02
女性是否生过孩子,过来人看3个部位就能判断,一般人隐藏不了

女性是否生过孩子,过来人看3个部位就能判断,一般人隐藏不了

大果小果妈妈
2026-03-29 08:26:01
总投资约1129亿元!国家发展改革委批复两铁路项目!

总投资约1129亿元!国家发展改革委批复两铁路项目!

中国勘察设计杂志
2026-04-07 14:53:34
海河牛奶直播间被指涉黄,市监部门:正在核实处理

海河牛奶直播间被指涉黄,市监部门:正在核实处理

现代快报
2026-04-07 21:17:05
张雪母亲是一名作家,发文讲述母子故事:抵押房子贷款55万帮儿子创业,张雪骑车撞人她赔了3万多

张雪母亲是一名作家,发文讲述母子故事:抵押房子贷款55万帮儿子创业,张雪骑车撞人她赔了3万多

极目新闻
2026-04-07 15:59:36
美国敢“踢”中国出SWIFT?那就强制人民币买中国货

美国敢“踢”中国出SWIFT?那就强制人民币买中国货

看看新闻Knews
2026-04-07 00:42:06
特朗普称4月7日即同伊朗达成协议的最终期限 “不可更改”

特朗普称4月7日即同伊朗达成协议的最终期限 “不可更改”

财联社
2026-04-06 23:28:10
陈光标变现大劳捐千万后续!曝嫣然已退款,原因炸裂,果然有猫腻

陈光标变现大劳捐千万后续!曝嫣然已退款,原因炸裂,果然有猫腻

阿凫爱吐槽
2026-04-08 01:06:52
特朗普承认美军F-15E战机是被伊朗肩扛式导弹打下来的,归结为伊朗运气好;两天后又有一架美军飞机被伊朗肩扛式导弹击中

特朗普承认美军F-15E战机是被伊朗肩扛式导弹打下来的,归结为伊朗运气好;两天后又有一架美军飞机被伊朗肩扛式导弹击中

极目新闻
2026-04-07 14:00:56
39岁男子考研落榜后举报复试第1考生 称其在候考室违规翻阅资料!华东师大回应称:正在调查!

39岁男子考研落榜后举报复试第1考生 称其在候考室违规翻阅资料!华东师大回应称:正在调查!

闪电新闻
2026-04-07 20:56:50
还认为茅台酒送的小酒杯是用来喝酒的?行家:大错特错,别闹笑话

还认为茅台酒送的小酒杯是用来喝酒的?行家:大错特错,别闹笑话

邹小蘑菇
2026-03-31 12:18:15
2026-04-08 04:07:00
IT之家
IT之家
爱科技,爱这里 - 前沿科技人气平台
337930文章数 607117关注度
往期回顾 全部

科技要闻

满嘴谎言!OpenAI奥特曼黑料大起底

头条要闻

特朗普:伊朗人愿为自由承受轰炸

头条要闻

特朗普:伊朗人愿为自由承受轰炸

体育要闻

斯洛特:去年我们在巴黎配得上输个0-4,比上周六踢曼城更配

娱乐要闻

女首富陈丽华离世 被曝生前已分好遗产

财经要闻

10万亿财政转移支付,被谁拿走了?

汽车要闻

不止是大 极狐首款MPV问道V9静态体验

态度原创

教育
旅游
游戏
手机
公开课

教育要闻

这位学生自制的学具你见过吗?

旅游要闻

废弃“老北京景观”能否随意搬回家

PlayStation全新炸裂计划公开!利好所有玩家

手机要闻

Ultra取消,Pro Max上位,华为Nova 16系列产线大调整!

公开课

李玫瑾:为什么性格比能力更重要?

无障碍浏览 进入关怀版