网易首页 > 网易号 > 正文 申请入驻

AI能自己进化吗?递归式自我改进卡在哪了

0
分享至

一个AI系统,如果不仅能自己写代码、调工具,还能自己定义"什么才算好结果",甚至自己出更难的考题——它会变成什么样?这个概念叫递归式自我改进(RSI),最近在AI研究圈讨论度很高。简单说,就是让AI进入一个自我进化的循环:每一次改进,都让它更擅长发起下一轮改进。

但文章作者给出了一个冷静的判断:真正的RSI还没实现。现在的AI Agent确实能改自己的运行环境、加插件、优化训练轨迹,但距离"自己定标准、自己验证、自己出题"的完整闭环,还差着关键一环——判断力。


从"迭代"到"自我改进",再到"递归"

要理解RSI,得先分清三个层级。最基础的叫迭代:模型在单次任务里反复调整输出,比如写一篇文章改三遍,改完就完了,系统本身没变。再往上叫自我改进:系统通过持久化的改变让自己未来表现更好,比如给Agent新增一个工具、改一段Prompt,下次遇到类似任务它就更强了。

而递归式自我改进,要求系统同时做到两件事:一是提升执行能力,二是提升评估标准——也就是那把"尺子"。系统不仅要做得更好,还要更擅长判断"什么才算好",并且能应对更难的测试。文章里有个比喻很形象:Agent = Model + Harness,模型是大脑,Harness是它运行的环境和工具链。

为什么先改Harness,而不是直接改模型权重?

目前的主流方向,是让Agent修改围绕模型运行的代码(Harness),而不是直接动模型权重。原因很实际:改代码比改权重容易得多,风险也小。像Karpathy的Autoresearch和DeepSeek的插件架构,都是让Agent自己写扩展插件并动态加载,在无人干预的情况下扩展能力、优化训练轨迹。

这种"模型与Harness共同进化"的思路,是当前最接近RSI的实践。但作者指出,这些改进大多处于"受约束"状态——系统能优化执行,但评估标准还是人定的。

真正的瓶颈:验证器与"品味"

RSI的核心障碍有两个。第一个是验证机制:如果Agent能编辑自己的评估器,就会导致严重的Reward Hacking(奖励作弊)——它会想办法骗过评分,而不是真正变强。目前的系统依赖外部独立验证器,这意味着AI还无法在不依赖人类设定目标的前提下,自主且诚实地提升标准。

第二个障碍更微妙,叫"品味"。AI很擅长在给定指标下爬升分数,但不擅长判断这个指标本身有没有价值、有没有研究意义。谁来决定"什么值得优化"?目前还是人类。文章里有一句话点得很透:如果没有判断力,递归式自我改进只会让系统更快地把错误方向做到极致。

换句话说,现在的AI是优秀的"执行者",但还不是合格的"评审"。真正的RSI,需要系统同时改进验证器、生成更难的测试、提升判断质量,并且不能控制最终的评估信号——这个闭环,目前还没有任何系统能完整跑通。

所以,AI会不会某天突然开始自我进化?至少从这篇文章的分析看,卡点不在算力,也不在算法,而在"谁来定义对错"这件事上。在人类交出这把尺子之前,RSI更像一个理论上的极限,而不是眼前的现实。

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
大三女儿暑假躺平40天,空调24小时不关奶茶30多一杯,我月薪几千省吃俭用,她张口又要3000旅游,我拒绝她摔门就走

大三女儿暑假躺平40天,空调24小时不关奶茶30多一杯,我月薪几千省吃俭用,她张口又要3000旅游,我拒绝她摔门就走

背包旅行
2026-09-01 11:59:19
崇明地铁年底通车,但有个绕不开的遗憾:50公里外的城区搭不上

崇明地铁年底通车,但有个绕不开的遗憾:50公里外的城区搭不上

小怪吃美食
2026-09-01 12:05:09
普京开学致辞左手露出大片淤青,3名医生:像注射后血肿

普京开学致辞左手露出大片淤青,3名医生:像注射后血肿

桂系007
2026-09-02 02:34:13
坦白了!刘翔公开回应体制,不要上班也不要补偿金,只选第三条路

坦白了!刘翔公开回应体制,不要上班也不要补偿金,只选第三条路

晓徙娱乐
2026-09-02 05:23:57
一楼业主怒怼楼上邻居:我同意装电梯,但凭什么要我出钱?

一楼业主怒怼楼上邻居:我同意装电梯,但凭什么要我出钱?

行者聊官
2026-08-30 11:10:45
那个“扛楼战神”阿兴,终于还是低下了头

那个“扛楼战神”阿兴,终于还是低下了头

生性洒脱
2026-09-02 00:48:26
我国每年近千万人做肠镜!医生直言:做一次肠镜,或管十年无碍

我国每年近千万人做肠镜!医生直言:做一次肠镜,或管十年无碍

芹姐说生活
2026-08-26 23:55:43
太难了!9300元学费压垮中年父亲,东莞一家长哭诉,人到中年第一次流眼泪,根本凑不齐学费

太难了!9300元学费压垮中年父亲,东莞一家长哭诉,人到中年第一次流眼泪,根本凑不齐学费

火山詩话
2026-08-31 20:42:48
蓝色小药片的“惊天反转”:明里让男人“雄起”,暗中将肿瘤“去势”?

蓝色小药片的“惊天反转”:明里让男人“雄起”,暗中将肿瘤“去势”?

一节生姜
2026-08-13 07:53:27
你还敢吃褪黑素吗?美国心脏协会警告:长期服用,心衰、死亡风险都翻倍!

你还敢吃褪黑素吗?美国心脏协会警告:长期服用,心衰、死亡风险都翻倍!

徐德文科学频道
2026-08-30 18:28:34
郑钦文美网次轮对手出炉:将战苦主普丁塞娃 过往两次交锋全败

郑钦文美网次轮对手出炉:将战苦主普丁塞娃 过往两次交锋全败

醉卧浮生
2026-09-02 07:48:23
“全民进入纯过日子时代”:当人们不再解释自己的生活

“全民进入纯过日子时代”:当人们不再解释自己的生活

知著网
2026-09-01 23:01:50
演员刘晓庆330万元借贷纠纷案二审败诉,需承担补充赔偿责任

演员刘晓庆330万元借贷纠纷案二审败诉,需承担补充赔偿责任

蓬勃新闻
2026-09-01 20:53:02
小蜘蛛替身!巴萨官宣29岁阿森纳中锋加盟 签3年穿9号 总价1400万欧

小蜘蛛替身!巴萨官宣29岁阿森纳中锋加盟 签3年穿9号 总价1400万欧

我爱英超
2026-09-01 21:01:42
《悉达多》最通透的一句话:被人伤透之后,低级觉醒是封心,中级觉醒是反击,顶级觉醒是看透这两点

《悉达多》最通透的一句话:被人伤透之后,低级觉醒是封心,中级觉醒是反击,顶级觉醒是看透这两点

心理观察局
2026-09-02 08:00:08
地方电视台收视基本为零,业务无以为继,还有存在的必要吗?

地方电视台收视基本为零,业务无以为继,还有存在的必要吗?

许三岁
2026-08-27 23:52:55
苏州初中初一96个班5000人!上厕所排队放学堵半小时,这学咋上?

苏州初中初一96个班5000人!上厕所排队放学堵半小时,这学咋上?

娱乐的宅急便
2026-09-02 07:13:39
扔球砸人球迷身份曝光!16岁高中生+赞助商儿子 本想砸裁判或对手

扔球砸人球迷身份曝光!16岁高中生+赞助商儿子 本想砸裁判或对手

念洲
2026-09-01 15:34:42
离谱!女排半决赛决赛两人合砍1分入选亚运,轰17分悍将无缘名单

离谱!女排半决赛决赛两人合砍1分入选亚运,轰17分悍将无缘名单

南海浪花
2026-09-02 08:32:44
CCTV5直播,中国女篮PK美国女篮,赛前迎来好消息,双塔亮剑!

CCTV5直播,中国女篮PK美国女篮,赛前迎来好消息,双塔亮剑!

体坛小快灵
2026-09-02 09:05:47
2026-09-02 10:24:50
硅屿手记
硅屿手记
有态度网友ytd
141文章数 69关注度
往期回顾 全部

科技要闻

凌晨最强模型上新,Claude Fable 5.1发布

头条要闻

3天内第2轮袭击 特朗普威胁伊朗终极打击蓄势待发

头条要闻

3天内第2轮袭击 特朗普威胁伊朗终极打击蓄势待发

体育要闻

大爹杨瀚森,让中国男篮有了容错空间

娱乐要闻

孙宇晨和景甜的瓜彻底反转了

财经要闻

全球粮价冲高,会影响国内市场吗

汽车要闻

山城试驾启源Q06 不光是智驾好用还有700km的续航

态度原创

教育
本地
艺术
亲子
健康

教育要闻

又一中国高校开设海外分校!

本地新闻

昆明的雨,解锁汪曾祺的浪漫雨季

艺术要闻

273米,10亿!深圳最多“外号”的摩天楼,正式运营!

亲子要闻

做了17年的心理疗愈的工作,我也很累,但是觉得很值

睡时发生脑梗,抢救时间该怎么算?

无障碍浏览 进入关怀版