网易首页 > 网易号 > 正文 申请入驻

普林斯顿8000次实验:AI技能库从5项增至100项,命中率29.6%暴跌至3.3%

0
分享至

给AI智能体装上"技能包",听起来是条不用重新训练就能提升能力的捷径。但普林斯顿大学和加州大学圣迭戈分校(UCSD)的研究团队用8135次对照实验发现:这条路确实有效,但坑也不少。

这项研究把AI智能体的"技能"拆开来看——它本质上是一套紧凑的操作指令,告诉智能体完成某类任务该走哪些步骤、检查什么指标、避开哪些常见错误。有了技能包,智能体不用每次从零摸索,直接调用过往经验即可。


过去,衡量技能有没有用,只看一个粗指标:装了技能的智能体是不是解决了更多任务。至于它为什么有用、什么时候失灵,没人说清楚。这次,研究团队用控制变量法把这个问题拆明白了。

技能是操作手册,不是知识库

研究最核心的发现是:技能之所以能提升表现,主要不是因为补足了知识盲区,而是因为它给了智能体一套可靠的执行流程。这种"流程锚定"效应,在技能确实带来提升的案例中占了65.7%。相比之下,直接靠技能补充事实性知识起作用的案例,只占4.5%。

换句话说,技能最大的价值在于"稳住操作"——该跑哪些环境配置步骤、按什么顺序调用工具、中间需要做哪些检查。这些流程上的规范,能明显减少执行层面的错误,比如环境搭建出错、输出格式不对这类低级问题。

但技能也带来了新的错误来源。研究发现,在10%的案例中,智能体会机械地套用一个本身没问题的操作手册,用在不合适的场景里。遇到需要完全不同解法的任务时,选错技能自然帮不上忙。有意思的是,技能与任务完全精确匹配,既不是充分条件也不是必要条件——很多情况下,一个相近的技能就能提供足够的指导方向。

技能库越大,反而越难选对

研究暴露的第二个瓶颈,恰恰出在"找技能"这一步。当技能库从5个条目增长到100个条目时,实际使用中的检索命中率从29.6%断崖式跌到3.3%。选项越多,尤其是那些听起来特别相似的技能,选择难度反而呈指数级上升。

这个数据值得玩味。直觉上,技能库越大,覆盖的场景应该越全。但检索精度的暴跌意味着,堆砌技能数量并不能直接转化为更强的能力——如果找不到对的技能,库存再多也是摆设。

研究团队据此提出,技能的使用应该被当作一个完整的生命周期来对待:创建、检索、应用,三个环节缺一不可。未来真正更强的自学习智能体,不会来自存储更多经验,而来自更可靠的技能生成、检索和应用机制。

这项研究给AI智能体的实用化路径提了个醒:与其盲目扩充技能库,不如先解决"如何精准找到对的技能"这个更基础的问题。毕竟,一个找不到的答案,和没有答案,结果是一样的。

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
两性关系:55-75岁这20年,惜命最好的方式,不是锻炼,而是这4点

两性关系:55-75岁这20年,惜命最好的方式,不是锻炼,而是这4点

周哥一影视
2026-08-23 00:00:47
古天乐演唱会汪明荃压轴出场,合唱《热咖啡》复刻TVB台庆经典

古天乐演唱会汪明荃压轴出场,合唱《热咖啡》复刻TVB台庆经典

TVB剧评社
2026-08-22 13:17:46
日本对华越来越硬!战争史专家:中日一旦交战,日本未必能说了算

日本对华越来越硬!战争史专家:中日一旦交战,日本未必能说了算

今夜繁星坠落
2026-08-22 20:42:42
委内瑞拉有20万华人,但最令人惊讶的是:这20万人里,竟有九成左右都来自同一个县城

委内瑞拉有20万华人,但最令人惊讶的是:这20万人里,竟有九成左右都来自同一个县城

背包旅行
2026-08-06 10:09:09
今天的国常会不简单,释放两大重磅信号!

今天的国常会不简单,释放两大重磅信号!

识局Insight
2026-08-22 00:20:11
曼城租将主场首秀补时绝杀旧主,一年前假摔染红今朝完成救赎

曼城租将主场首秀补时绝杀旧主,一年前假摔染红今朝完成救赎

温柔且自由
2026-08-23 00:27:10
他们兄弟都是演员,如今弟弟已去世22年,哥哥70岁仍在拍戏

他们兄弟都是演员,如今弟弟已去世22年,哥哥70岁仍在拍戏

娱说瑜悦
2026-08-22 14:44:57
0-2爆冷!赫尔城球迷杀人诛心:不光赢球,连回曼市的火车都给你取消

0-2爆冷!赫尔城球迷杀人诛心:不光赢球,连回曼市的火车都给你取消

追梦聊球
2026-08-23 00:26:57
"漏诊"的风吹到了口腔科,患者去世,医生被告!专家:认知有问题,当时为何不查血常规、请急会诊?

"漏诊"的风吹到了口腔科,患者去世,医生被告!专家:认知有问题,当时为何不查血常规、请急会诊?

医脉圈
2026-08-22 20:11:11
看完iPhone 18 Pro Max的爆料,我真的想换机了

看完iPhone 18 Pro Max的爆料,我真的想换机了

小柱解说游戏
2026-08-20 12:02:02
许家印被判无期!刘永灼刑拘31个月无下落 夏海钧套现1亿跑到美国

许家印被判无期!刘永灼刑拘31个月无下落 夏海钧套现1亿跑到美国

林子说事
2026-08-22 08:14:13
惨败意大利,宫鲁鸣传统中锋打法碰壁,张子宇威力大减,得分不如陈明伶

惨败意大利,宫鲁鸣传统中锋打法碰壁,张子宇威力大减,得分不如陈明伶

南海浪花
2026-08-22 06:37:47
特朗普:如有需要将出动美军干预债市

特朗普:如有需要将出动美军干预债市

上观新闻
2026-08-22 12:14:54
谢定峰/苏伟译2-0金元浩/徐承宰,晋级羽毛球世锦赛男双决赛

谢定峰/苏伟译2-0金元浩/徐承宰,晋级羽毛球世锦赛男双决赛

懂球帝
2026-08-23 00:48:19
“零食占座”当事人妈妈发声:没请到假送孩子,多买一张票因儿童不能单独购票

“零食占座”当事人妈妈发声:没请到假送孩子,多买一张票因儿童不能单独购票

澎湃新闻
2026-08-22 22:55:04
“再也不敢网上买绿植了”,女子59.8元买的盆栽18天爬出4条蛇,扒开泥土还有蛇蛋!“商家至今不退款,让我买杀蛇药”

“再也不敢网上买绿植了”,女子59.8元买的盆栽18天爬出4条蛇,扒开泥土还有蛇蛋!“商家至今不退款,让我买杀蛇药”

都市快报橙柿互动
2026-08-23 00:16:56
看完《龙餐馆》后,我最大的请求是:若沈腾拿不了影帝,也必须给蒋奇明一个最佳男配!

看完《龙餐馆》后,我最大的请求是:若沈腾拿不了影帝,也必须给蒋奇明一个最佳男配!

娱乐故事
2026-08-12 22:28:02
爆炸物有多少?咋来的?山东临沂居民区平房爆炸,已致1人死亡2人失联紧急安置150人

爆炸物有多少?咋来的?山东临沂居民区平房爆炸,已致1人死亡2人失联紧急安置150人

大风新闻
2026-08-22 11:18:04
两性心理学:房事上女人不怕肢体接触,怕的是男人这两个“骚操作”

两性心理学:房事上女人不怕肢体接触,怕的是男人这两个“骚操作”

心理观察局
2026-08-17 06:45:11
“救市”无果,特朗普宣布:可出动美军干预美债市场!美债遭大规模抛售,日本4个月减持超1200亿美元,中国减持超600亿

“救市”无果,特朗普宣布:可出动美军干预美债市场!美债遭大规模抛售,日本4个月减持超1200亿美元,中国减持超600亿

鲁中晨报
2026-08-22 17:54:02
2026-08-23 01:44:49
我是一个粉刷匠2
我是一个粉刷匠2
有态度网友ytd
235文章数 166关注度
往期回顾 全部

科技要闻

苹果裁员200人:Vision Pro砍游戏团队

头条要闻

全季起诉“金季”索赔10万 老板娘:日租才50到60元

头条要闻

全季起诉“金季”索赔10万 老板娘:日租才50到60元

体育要闻

字母+汤神,有没有搞头?

娱乐要闻

《空枪》预测票房缩水,手握王炸都没赢

财经要闻

蔡昉解读经济:扩大消费需求的政策思考

汽车要闻

钛9全球首秀/四季度上市 方程S系列内饰车展亮相

态度原创

游戏
健康
艺术
数码
教育

《GTA6》泄露视频不见女主 黑客玩可能只是Demo

“矫正神器”真能治好脊柱侧弯吗?

艺术要闻

他把新加坡的老破小“P”成了未来都市!水彩界的神笔马良,看完我想搬家

数码要闻

19899元!七彩虹隐星G16 Pro新配置开卖:i9 14900HX+RTX 5090

教育要闻

2026山东中考数学第14题,中考数学真题学习

无障碍浏览 进入关怀版