网易首页 > 网易号 > 正文 申请入驻

397B开源模型四项基准反超Claude Opus 4.8 自生成任务训练成关键

0
分享至

开源大模型阵营又迎来一位挑战者。Rohan Paul在X平台发文介绍,Ornith-1.5系列模型正式发布,覆盖9B Dense、35B MoE和397B MoE三个规模档位。其中最受关注的是397B MoE版本,在四项基准测试中均超过Claude Opus 4.8。

四项基准的具体差距


从公开数据看,Ornith-1.5在Terminal-Bench 2.1上拿到86.1分,对比Claude Opus 4.8的85分;SWE-bench Verified上以86分对85.8分;WideSearch上以80.8分对72.9分,领先幅度最大;BrowseComp上以86.6分对84.3分。四项全部胜出,且差距并非微弱。

值得注意的细节是,Ornith-1.5并非单纯靠参数规模取胜。397B MoE的权重规模与Claude Opus 4.8同属一个量级,但训练策略上做了明显调整。官方描述称,这一代模型把任务生成、智能体设计和解决方案生成放进了同一个强化学习循环里。

训练逻辑的变化

传统强化学习流程中,任务设计通常由人工完成,模型只负责在给定任务上优化策略。Ornith-1.5的做法不同:模型自己提出任务,自己编写用于评分的脚手架,自己生成解决方案的rollout,再通过GRPO算法把奖励信号反向传播到这三个阶段。这意味着任务生成环节不再依赖大量人工设计。

官方说明中提到,Ornith-1.5会从一个环境或代码库出发,配合高层级任务指令,然后在模型当前能力边界附近搜索可训练的任务。这种自生成课程机制,让仓库和可验证环境成为比静态示例更有价值的训练输入。

对开源社区意味着什么

这一设计思路的潜在影响在于,训练数据的价值排序可能发生变化。拥有更丰富任务生成和验证环境的实验室,即使不依赖最大规模的人工数据集,也可能在模型迭代速度上获得优势。计算资源开始购买课程质量,而不仅仅是更多梯度更新。

Ornith-1.5在开源模型中达到了同规模下的领先水平,官方称其性能与Claude Opus 4.8相当。对于关注开源模型进展的开发者来说,这套自生成任务的训练框架,或许比基准分数本身更值得研究。

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
天津亚锦赛:中国女排“恶战”伊拉克!一传崩盘成“致命死穴”

天津亚锦赛:中国女排“恶战”伊拉克!一传崩盘成“致命死穴”

顺静自然
2026-08-22 04:51:11
许家印结局已定,恒大歌舞团长白珊珊,被曝低调嫁给了这个男人

许家印结局已定,恒大歌舞团长白珊珊,被曝低调嫁给了这个男人

你是我的小甜甜
2026-08-21 11:18:33
希尔-马林:会帮小蜘蛛,不允许其他俱乐部和媒体替我们决定

希尔-马林:会帮小蜘蛛,不允许其他俱乐部和媒体替我们决定

懂球帝
2026-08-22 01:06:05
男明星的颜值有多重要?当38岁朱一龙和35岁檀健次同台,差距明显

男明星的颜值有多重要?当38岁朱一龙和35岁檀健次同台,差距明显

落雪听梅a
2026-08-22 03:21:43
“现在80码,怎么也降不下来!”浙江一家四口自驾出游,杭瑞高速刹车失灵,妻子哭着拨通报警电话,生死时速4分16秒……

“现在80码,怎么也降不下来!”浙江一家四口自驾出游,杭瑞高速刹车失灵,妻子哭着拨通报警电话,生死时速4分16秒……

极目新闻
2026-08-21 20:44:45
肿瘤专家:3种水果尽量别贪嘴,吃多了可能是在喂养癌细胞

肿瘤专家:3种水果尽量别贪嘴,吃多了可能是在喂养癌细胞

小胡军事爱好
2026-08-21 09:45:37
“变性人”河莉秀:丈夫跑了,身体垮了,51岁骨骼比80岁老人还差

“变性人”河莉秀:丈夫跑了,身体垮了,51岁骨骼比80岁老人还差

探源历史
2026-08-22 01:26:41
邓超坐轮椅不到一年,儿子也拄拐现身!原因彻底曝光,孙俪太难了

邓超坐轮椅不到一年,儿子也拄拐现身!原因彻底曝光,孙俪太难了

古事寻踪记
2026-08-21 09:38:52
公认最安全的 3 个酱油牌子!家用炒菜凉拌,老人小孩都能放心吃

公认最安全的 3 个酱油牌子!家用炒菜凉拌,老人小孩都能放心吃

马蹄烫嘴说美食
2026-08-21 10:29:25
港媒:中式美学日益受到西方年轻人青睐

港媒:中式美学日益受到西方年轻人青睐

参考消息
2026-08-21 09:57:16
湖北男子为修路承诺捐款十万元,公路通车三年钱却未到账,最终被诉至法院强制执行

湖北男子为修路承诺捐款十万元,公路通车三年钱却未到账,最终被诉至法院强制执行

娱乐圈的笔娱君
2026-08-22 01:51:51
曝莫斯科大面积断电断网!电力目标成乌克兰打击新重点

曝莫斯科大面积断电断网!电力目标成乌克兰打击新重点

项鹏飞
2026-08-19 15:47:00
比开除更残酷!陈璇下蹲事件新后续:保住了编制,但丢了职业底气

比开除更残酷!陈璇下蹲事件新后续:保住了编制,但丢了职业底气

大鱼简科
2026-08-19 09:34:06
8月21日俄乌:德国考虑对俄罗斯出手,乌无人机再度飞越乌拉尔山脉

8月21日俄乌:德国考虑对俄罗斯出手,乌无人机再度飞越乌拉尔山脉

山河路口
2026-08-21 19:42:18
“AI写的代码,我完全不看”,世界级编程大师Bob大叔警示:说软件基础不重要的人会吃苦头,不会等太久

“AI写的代码,我完全不看”,世界级编程大师Bob大叔警示:说软件基础不重要的人会吃苦头,不会等太久

CSDN
2026-08-21 19:20:23
相声名家田立禾去世,住六楼公房清贫一生 魏文亮赶到时已天人两隔

相声名家田立禾去世,住六楼公房清贫一生 魏文亮赶到时已天人两隔

动物奇奇怪怪
2026-08-22 00:05:03
未招满!西湖大学2027级博士生名额大量剩余,原因竟然是这样的

未招满!西湖大学2027级博士生名额大量剩余,原因竟然是这样的

史海流年号
2026-08-18 11:50:06
生育大局或已定?中国人口男女性别比失衡严重,普通人该怎么做?

生育大局或已定?中国人口男女性别比失衡严重,普通人该怎么做?

墨兰史书
2026-08-22 06:10:10
最新!广东省政府任免工作人员

最新!广东省政府任免工作人员

21世纪经济报道
2026-08-21 16:36:59
发现一个很通透的真相:一个家庭,如果老公挣不了大钱,妻子不去和老公闹,只要老公不偷不赌不懒,对家庭和孩子负责,日子就会好起来

发现一个很通透的真相:一个家庭,如果老公挣不了大钱,妻子不去和老公闹,只要老公不偷不赌不懒,对家庭和孩子负责,日子就会好起来

背包旅行
2026-08-07 11:42:44
2026-08-22 06:43:00
码上闲叙
码上闲叙
有态度网友ytd
206文章数 88关注度
往期回顾 全部

科技要闻

阿里AI的两面:云赚56亿,千问烧掉138亿

头条要闻

辽宁一处长在单位门口遭枪击 女儿被警察配枪护学近1年

头条要闻

辽宁一处长在单位门口遭枪击 女儿被警察配枪护学近1年

体育要闻

续哈登+招沃特森=骑士赌了

娱乐要闻

冯绍峰七夕带儿子游玩!次日聚会

财经要闻

蔡昉解读经济:扩大消费需求的政策思考

汽车要闻

2026成都车展:小鹏全阵容亮相 三款新车套件上新

态度原创

房产
艺术
手机
本地
时尚

房产要闻

两大热盘即将入市!三亚又一批安居房狠货要炸场了!

艺术要闻

许家印倒台之前收到两幅字,网友:一个真敢写,一个真敢收啊!

手机要闻

全球智能手机销量下滑 唯独苹果逆势增长表现亮眼

本地新闻

《牛来》的一声“妈妈”,到底多少人被精神污染了

全网全文背诵:阿姨你找谁啊?

无障碍浏览 进入关怀版