网易首页 > 网易号 > 正文 申请入驻

不喂技能文件,Qwen3.5-35B-A3B成绩反涨19.10分

0
分享至

把技能文件塞进提示词,模型不一定找得到、也不一定照着做。上海AI实验室的一篇新论文给出了另一条路:用验证通过的技能运行轨迹来训练模型,让它本身变成一个更好的智能体,即便手上没有技能文件。

论文的核心发现是,提示词层面的技能依赖检索和指令遵循两个环节,任何一环掉链子,技能就白给了。而在经过验证的技能运行轨迹上做微调,能降低这种依赖。


把技能文件变成一道有判分的题

SkillGym 的做法是把每一份技能文件转成一个沙箱任务,再配一个通过或失败的检查器。模型跑这些任务,只有跑通的那部分运行轨迹会被拿来当训练数据。

这套流程解决的是一个老问题:技能文件通常躺在提示词里,只有被智能体找到并遵循,它才起作用。找不到、不照做,技能就等于不存在。

训练数据来自"跑对了"的运行,而不是来自技能文件本身。模型学到的是完成任务的过程,不是一段需要被检索的说明。

Claude Code 里的成绩单

在 Claude Code 环境中,Qwen3.5-35B-A3B 在 Terminal-Bench 2.1 上的成功率从 39.33% 提升到 58.43%,涨了 19.10 个百分点。

更值得注意的是没有技能文件时的表现:在 SkillsBench 上,它拿到 26.81%,超过了带技能的基座模型的 23.34%。也就是说,训练之后模型不靠外部技能文件,也能打赢原来那个拿着技能的版本。

技能文件并没有因此变得没用。在训练后的模型上再加载技能,成绩还能继续往上走,达到 51.47%。

技能该放在提示词里,还是放进权重里

这条路线给出的答案偏向后者。技能文件放在提示词里,效果受限于检索和遵循;把验证过的运行轨迹喂进训练,能力就沉到了模型本身。

两种方式并不互斥。加载技能仍然能带来额外提升,说明训练后的模型对技能的利用效率也变了——它不再是"能不能找到"的问题,而是"找到之后能叠加多少"的问题。

对做智能体的人来说,这个结果指向一个具体的操作:与其反复打磨提示词里的技能描述,不如先造一个能判定对错的沙箱,把跑通的轨迹收集起来。数据从哪来,可能比数据怎么写更关键。

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
1000赛9连败!周杰伦现场观战,张之臻遭逆转止步上海大师赛首轮

1000赛9连败!周杰伦现场观战,张之臻遭逆转止步上海大师赛首轮

全景体育V
2026-10-07 17:01:03
央视明示:此前在南海“瘫痪”4天的美军驱逐舰,疑似是被055大驱高速拉爆的!

央视明示:此前在南海“瘫痪”4天的美军驱逐舰,疑似是被055大驱高速拉爆的!

天下布武
2026-10-07 15:13:22
2026诺贝尔化学奖给了法国95岁学者和日本75岁学者,日本出身的诺奖得主已有28位

2026诺贝尔化学奖给了法国95岁学者和日本75岁学者,日本出身的诺奖得主已有28位

知识分子
2026-10-07 18:05:36
汽车离加油站20多米燃油耗尽,请加油员手动灌油被拒,无奈花350元叫拖车,加油站道歉:签字备案后可借散装油

汽车离加油站20多米燃油耗尽,请加油员手动灌油被拒,无奈花350元叫拖车,加油站道歉:签字备案后可借散装油

极目新闻
2026-10-07 16:00:12
卫健委已将左氧氟沙星列为重点监控药物!提醒:服用千万注意

卫健委已将左氧氟沙星列为重点监控药物!提醒:服用千万注意

健康科普365
2026-10-07 11:35:08
原定毛主席当大元帅,周刘邓当元帅,为何授衔前半个月全变了?

原定毛主席当大元帅,周刘邓当元帅,为何授衔前半个月全变了?

纪史行者
2026-10-07 06:00:11
上海一家三口长假爬山,下山走野路结果被困,“当时真绝望了,什么都看不见,我还带着老婆、10岁的孩子……”国庆前刚有人在此失足坠崖

上海一家三口长假爬山,下山走野路结果被困,“当时真绝望了,什么都看不见,我还带着老婆、10岁的孩子……”国庆前刚有人在此失足坠崖

都市快报橙柿互动
2026-10-07 17:37:20
出现第二例死亡,应全力施压俄罗斯共享鼠疫信息

出现第二例死亡,应全力施压俄罗斯共享鼠疫信息

黔有虎
2026-10-07 20:03:37
小伙特意请假回家过节,假期第一天被毒蛇咬伤,注射10支抗蛇毒血清才保住手臂,整个假期都耗在医院,父亲因连日奔波照料累到病倒

小伙特意请假回家过节,假期第一天被毒蛇咬伤,注射10支抗蛇毒血清才保住手臂,整个假期都耗在医院,父亲因连日奔波照料累到病倒

芒果都市
2026-10-07 14:52:32
又一品牌“切割”:对于蔡康永不当行为强烈震惊、坚决反对,下架全部相关合作内容

又一品牌“切割”:对于蔡康永不当行为强烈震惊、坚决反对,下架全部相关合作内容

第一财经资讯
2026-10-06 21:46:02
中国可能要全面双休,全面双休意味着什么?对中国人有什么影响?

中国可能要全面双休,全面双休意味着什么?对中国人有什么影响?

云霄纪史观
2026-10-07 16:37:34
没想到,2026年诺贝尔奖出炉后:美国1人,德国2人,中国却很意外

没想到,2026年诺贝尔奖出炉后:美国1人,德国2人,中国却很意外

阿腩讲娱乐
2026-10-07 07:56:00
尴尬了!原定26桌婚宴突来36桌:山东新娘学生家长全家赴宴,10桌缺口让主家酒店总管,集体懵圈

尴尬了!原定26桌婚宴突来36桌:山东新娘学生家长全家赴宴,10桌缺口让主家酒店总管,集体懵圈

火山詩话
2026-10-06 08:31:34
尴尬!C罗声明已发17小时,0个葡萄牙队友公开支持他,热苏斯赢了

尴尬!C罗声明已发17小时,0个葡萄牙队友公开支持他,热苏斯赢了

风过乡
2026-10-07 20:25:05
突发!北美机场惊魂一幕!华人女教师被当街拖走!一路高喊“谁能帮我打911?!”

突发!北美机场惊魂一幕!华人女教师被当街拖走!一路高喊“谁能帮我打911?!”

北国向锡安
2026-10-07 09:26:03
吴奇隆因举旗被取消活动,网友质疑其立场,吴奇隆:不赚钱也这样

吴奇隆因举旗被取消活动,网友质疑其立场,吴奇隆:不赚钱也这样

蜜桔娱乐
2026-10-07 09:55:52
关闭电商、取消外卖,恢复市面繁荣 ,将人间烟火气重燃 , 是否可行

关闭电商、取消外卖,恢复市面繁荣 ,将人间烟火气重燃 , 是否可行

兴趣知识
2026-10-06 01:09:51
中央气象台:今晚到明晚,海南岛、新疆、内蒙古、黑龙江、甘肃、四川、贵州、云南、台湾岛等地有小到中雨,海南岛中东部有暴雨或大暴雨

中央气象台:今晚到明晚,海南岛、新疆、内蒙古、黑龙江、甘肃、四川、贵州、云南、台湾岛等地有小到中雨,海南岛中东部有暴雨或大暴雨

蓬勃新闻
2026-10-07 17:54:32
一场0-2大爆冷,3号种子高芙翻车,郑钦文双喜临门,迎冲冠良机!

一场0-2大爆冷,3号种子高芙翻车,郑钦文双喜临门,迎冲冠良机!

大秦壁虎白话体育
2026-10-07 16:57:45
国庆高速数据彻底打脸!油电大势已定,再也回不去了

国庆高速数据彻底打脸!油电大势已定,再也回不去了

华庭讲美食
2026-10-06 02:59:29
2026-10-07 22:23:00
Ping值焦虑
Ping值焦虑
有态度网友ytd
103文章数 109关注度
往期回顾 全部

科技要闻

诺贝尔化学奖揭晓,两位科学家摘得大奖

头条要闻

迟到25年95岁科学家终于获诺奖 他的研究拯救无数家庭

头条要闻

迟到25年95岁科学家终于获诺奖 他的研究拯救无数家庭

体育要闻

从骑马舞到开口全中文 德约在北京不止七冠

娱乐要闻

蔡康永风波再升级!这次谁也救不了他

财经要闻

谷歌签下科技史上最大核能协议

汽车要闻

智能化再提升 2027款东风标致、东风雪铁龙新车更人性化了

态度原创

艺术
时尚
数码
游戏
本地

艺术要闻

烂尾楼逆袭!徐州第二高楼,快建好了!

刘雯的松弛感卫衣穿搭,太值得借鉴了

数码要闻

准系统6689元:铭凡MS-03迷你主机酷睿Ultra 9 386H版本开售

德玛西亚杯:SR直落两局横扫GAM!TES是怎么输给GAM的?

本地新闻

中秋逛白塔寺,体验国医妙荟雅集

无障碍浏览 进入关怀版