网易首页 > 网易号 > 正文 申请入驻

9B智能体得分69.1:只练模型或只改技能,一半提升被浪费

0
分享至

英伟达一篇新论文给出了一个反直觉的结论:想让智能体扛住长流程、多步骤的复杂任务,最有效的做法不是把模型练得更狠,也不是把技能文件写得更全,而是在两者之间来回切换。

论文里的说法很直接:只训练模型,或者只改技能配置,都会把大约一半的提升空间留在桌上。交替进行多轮更新,才能把这块空间捡回来。


问题出在打分方式上

大多数评测环境只给最终结果打分。任务跑完了,对就是对,错就是错,中间哪一步崩的,没人知道。

这种打分方式对长流程任务尤其不友好。一个几十步的工作流,最后失败了,可能是第三步读错了文件,也可能是第十七步调错了工具,但反馈信号里只有一句"整体没过"。

英伟达的做法是把评测过程拆开。VERA 构建了超过 9000 个可重启的沙箱,每一步都拿真实文件和日志去核对,给每个步骤单独打一个清单式的分数。

换句话说,长工作流里的每一步,都有了自己的成绩单,而不是等整场考试结束才知道总分。

分数决定下一步改哪里

有了逐步分数之后,接下来的问题就变成了:这一轮修复,应该改模型,还是改技能文件?

论文给出的答案是让分数来定。哪一步失分,就针对那一步决定修复方向——是模型本身的能力不够,还是技能配置没写对。

这个思路把原本混在一起的两件事拆成了两条独立的改进路径,然后交替推进。

在医学研究基准测试上,这套方法的效果被量化了出来。一个 9B 参数的智能体,两种更新方式都用上,得分 69.1。

只做技能编辑,得分 56.1。只做模型训练,得分 43.3。

三个数字摆在一起,差距不是一点半点。两种更新交替进行的组合,比单独做技能编辑高出 13 分,比单独训练模型高出近 26 分。

长流程任务需要不同的改进节奏

这套方法的核心逻辑可以概括成一句话:拿真实产物给每一步打分,再让这些分数决定下一次修复是进模型还是进技能。

对做智能体的人来说,这个结论指向一个具体的操作习惯——不要一次性把模型练到底,也不要指望把技能文件写到完美,而是让两者在轮次里互相补位。

9000 多个可重启沙箱的意义也在这里:它把一次性的基准测试,变成了可以反复进入、逐步归因的训练场。

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
湖南永州通报“商务局周某某相关举报”:成立调查组

湖南永州通报“商务局周某某相关举报”:成立调查组

界面新闻
2026-10-09 18:52:06
视频丨巴拿马7.6级地震已致27人受伤 现场画面显示余震不断

视频丨巴拿马7.6级地震已致27人受伤 现场画面显示余震不断

国际在线
2026-10-10 14:17:42
微博CEO王高飞再谈尊界V800刹车踏板事件,称暂停交付、查车厂台架实验记录比较合理

微博CEO王高飞再谈尊界V800刹车踏板事件,称暂停交付、查车厂台架实验记录比较合理

IT之家
2026-10-09 18:45:07
特朗普新任白宫新闻秘书:曾在北京工作3年,任职中国知名律所,会讲普通话

特朗普新任白宫新闻秘书:曾在北京工作3年,任职中国知名律所,会讲普通话

红星新闻
2026-10-10 12:19:33
老年人“黄金体重”标准来了!60岁后,体重保持在这个范围更长寿

老年人“黄金体重”标准来了!60岁后,体重保持在这个范围更长寿

牛锅巴小钒
2026-10-10 03:14:47
巴拿马一天连遭两次强震,为何巴拿马运河安然无恙?近年对其造成威胁的另有原因

巴拿马一天连遭两次强震,为何巴拿马运河安然无恙?近年对其造成威胁的另有原因

红星新闻
2026-10-10 13:44:42
白宫淡化鬣狗咬特朗普事件 称媒体关注是自由派偏见

白宫淡化鬣狗咬特朗普事件 称媒体关注是自由派偏见

赴一场山海啊
2026-10-10 02:42:07
“车主距加油站20多米求助灌油被拒”,加油站最新回应:按规定可用油桶装油,当日两人值班,非新员工

“车主距加油站20多米求助灌油被拒”,加油站最新回应:按规定可用油桶装油,当日两人值班,非新员工

新京报
2026-10-10 13:50:57
史上最大退休潮来了!平均每天6万人退休

史上最大退休潮来了!平均每天6万人退休

城事堂
2026-10-10 09:30:08
人社部:下一步重点鼓励支持灵活就业人员、农民工、新就业形态人员参加职工养老保险

人社部:下一步重点鼓励支持灵活就业人员、农民工、新就业形态人员参加职工养老保险

红星新闻
2026-10-10 12:51:30
10月10日,人社部发布会公布重要消息,提到2026年养老金调整吗?

10月10日,人社部发布会公布重要消息,提到2026年养老金调整吗?

虎哥闲聊
2026-10-10 11:44:23
演员周杰透露10年来每天只吃1顿饭,网友质疑“不健康”,医生提醒:长期如此容易营养缺乏

演员周杰透露10年来每天只吃1顿饭,网友质疑“不健康”,医生提醒:长期如此容易营养缺乏

极目新闻
2026-10-09 22:50:14
加拿大、丹麦、德国、法国、意大利、日本、荷兰、英国,发表联合声明

加拿大、丹麦、德国、法国、意大利、日本、荷兰、英国,发表联合声明

政知新媒体
2026-10-10 07:51:17
河北沧州一女子花15元网购9斤蜜薯后申请仅退款,称有本事就过来拿,商家跨省驱车来回800公里连夜取回:最终只拿回3斤,就是为了出一口气

河北沧州一女子花15元网购9斤蜜薯后申请仅退款,称有本事就过来拿,商家跨省驱车来回800公里连夜取回:最终只拿回3斤,就是为了出一口气

扬子晚报
2026-10-10 07:35:46
一张个税截图炸翻网络!7月入账35万引热议,网友直呼:旱的旱死,涝的涝死

一张个税截图炸翻网络!7月入账35万引热议,网友直呼:旱的旱死,涝的涝死

火山詩话
2026-10-09 18:19:10
给具身智能换个「因果」内核,Aether AI的愿景终于走进物理世界

给具身智能换个「因果」内核,Aether AI的愿景终于走进物理世界

机器之心Pro
2026-10-09 14:39:01
凡某林头部被砸,抢救无效死亡,多人被建议追责

凡某林头部被砸,抢救无效死亡,多人被建议追责

南方都市报
2026-10-10 12:57:30
舆论反转!尊界踏板支架断裂事件,余承东淡定反应获网友力挺,直言“余总这波,输没输产品另说,至少没输人”

舆论反转!尊界踏板支架断裂事件,余承东淡定反应获网友力挺,直言“余总这波,输没输产品另说,至少没输人”

火山詩话
2026-10-09 14:57:30
不可思议!网传华中某高校强制6名女学生机场无偿接待留学生,辅导员上门讲集体荣誉,学生据理力争改写旧惯例

不可思议!网传华中某高校强制6名女学生机场无偿接待留学生,辅导员上门讲集体荣誉,学生据理力争改写旧惯例

火山詩话
2026-10-09 07:23:16
巴拿马7.6级地震为70多年来最强地震,预计损失超10亿美元

巴拿马7.6级地震为70多年来最强地震,预计损失超10亿美元

爆角追踪
2026-10-10 07:37:26
2026-10-10 15:00:49
爬虫饲养员
爬虫饲养员
业余养了只叫“龙虾”的AI爬虫,主业是给互联网打工。
214文章数 82关注度
往期回顾 全部

科技要闻

上世纪成熟的踏板,为何今天还会断裂?

头条要闻

牛弹琴:诺奖没颁给特朗普当事人很生气 严重后果来了

头条要闻

牛弹琴:诺奖没颁给特朗普当事人很生气 严重后果来了

体育要闻

与C罗硬碰硬,一个72岁老人的倔强

娱乐要闻

王仁君获飞天视帝,赵丽颖发文祝贺

财经要闻

蹭尊界流量?岚图汽车在“玩火”

汽车要闻

老车主请回避 2026款理想i6升级都是你想要的

态度原创

健康
教育
手机
游戏
旅游

痘坑留下后,还能填平吗?

教育要闻

“这次先放过你”——商务英语里那条逃掉的鱼

手机要闻

小米澎湃OS 4 Beta版10月14日截止招募!正式版10月15日起分批推送

曝《战争机器》新作销量仅23万!玩家呼吁快上PS5

旅游要闻

这才叫国潮|一座博物馆,能有多少种新体验?

无障碍浏览 进入关怀版