网易首页 > 网易号 > 正文 申请入驻

Agent上线半年还在犯老错?腾讯工程师拆解自进化四齿飞轮:评测→记忆→落地→控制

0
分享至

你的Agent上线半年了,回头看看——它比第一天聪明了吗?它可能还在犯三个月前就犯过的错,还在重复三个月前就走过的弯路,还在对三个月前就见过的场景表现得像个新手。半年的线上流量喂过去,它一点经验都没攒下来。

问题不在模型不够强。问题在于——没有人给它搭一条从"做过"到"记住"到"变好"的路。腾讯程序员yannisyang、ethanytzhou基于对Anthropic递归自改进报告、斯坦福CS329A课程、EvoAgentX等开源框架的深度研读,结合业界多个团队已验证的优秀实践,提炼出一套评测→记忆→落地→控制的四齿飞轮方法论。


一个被拆散的系统

最近几个月,一个普遍且致命的现象被观察到:评测、记忆、Self-Improve这三件事,在大多数团队里是被拆散着做的。评测团队搭了一套评分系统,跑完打个分就结束了——分数去了周报,没有去到Prompt或Skill的改进链路里。记忆团队做了一套向量检索,存了一堆对话历史——但召回的东西噪声太高,Agent反而被干扰了,最后记忆模块被默默关掉。

每个团队都在认真地做自己那一块,但飞轮没有转起来。因为这三件事不是三个独立的功能点——它们是同一个闭环的不同环节。评测是闭环的"眼睛"(感知哪里有问题),记忆是闭环的"大脑"(积累可复用的经验),Self-Improve是闭环的"手脚"(把经验变成实际的改进),人机协作是闭环的"方向盘和刹车"(确保进化方向不跑偏)。

自进化改的到底是什么?

2026年上半年,自进化从"学术概念"突然变成了"工程热点"——斯坦福开了CS329A课程、Anthropic发布了递归自改进报告和Dreaming机制、多个开源框架出现、业界多个团队跑通了完整闭环。这个领域正从"能不能做"跨越到"怎么做好"的阶段。

"自进化"这个词被用得很滥。有人拿Self-Refine(让Agent多改几版输出)叫自进化,有人拿Agent RL(训模型权重)叫自进化。它们是完全不同的东西。改什么,就决定了"进化"的持久性和价值,分为三层:

  • 第一层:Artifacts迭代——改输出产物。代码写了三版越来越好、方案改了几稿越来越靠谱。但任务结束,Agent本身没有任何改变。这不是进化,这是打草稿。
  • 第二层:Harness自改进——改Agent的配套系统。记忆、Skill文件、Prompt、工具配置、工作流——这些改动持久化到文件或数据库,跨会话生效。这是当前最具性价比的进化方向。
  • 第三层:Model进化——改模型参数本身。通过Agent RL、自对弈微调将经验写入权重。持久性最强,但成本最高、风险最大,目前仍在研究阶段。

为什么Harness层是主战场?四个字:即时、可控。改完Skill/Prompt立刻生效,不需要重训模型;改错了一键回滚,不会造成不可逆的损害。已有落地案例通过Harness层进化,迭代次数减少70%、Token消耗降低80%+;在Agent Memory场景中Token节省超60%——这些收益全部来自"改配套系统",一个模型参数都没动。

核心立场与飞轮结构

这篇文章的核心立场有三个:①自进化的瓶颈不是任何一个技术点,而是环节之间的衔接。评测信号必须能流进记忆和Skill更新;更新后必须能被评测验证;验证结果必须能反哺下一轮进化。这条链路断了任何一环,飞轮都转不起来。②评测的可信度大于系统的复杂度。一个简单但评测可信的系统,远好于一个复杂但评测失真的系统。错误的正反馈会让Agent加速开往悬崖。③记忆系统的核心不是存储能力,而是治理能力。存得多不如治得好——版本控制、主动遗忘、冲突解决、来源溯源,这些"不性感"的治理能力才是决定记忆系统到底帮忙还是添乱的关键。

飞轮按照四个齿逐一展开:信号(评测)→积累(记忆)→落地(工程化)→控制(人机协作)。每个环节讲清楚三件事:核心矛盾是什么、应该怎么建设、有哪些坑必须避开。最后一章讲它们怎么咬合成飞轮、以及从零到一的落地路线。

一个具体的例子帮助理解三层的区别:假设你的Agent在处理"日期格式转换"时经常出错。Artifacts层让Agent在本次任务中多试几次、自我纠错——这次做对了,但下次遇到同样的问题它不会更快。Harness层写一条Skill——"遇到日期格式转换时,先识别源格式再用对应的转换函数"——持久化保存,下次遇到直接follow这条Skill,不再犯错。Model层用大量日期格式转换的正确样本微调模型——模型本身"学会"了这件事。成本最高,但也最根本。对于绝大多数团队来说,写一条Skill(Harness层)就能解决问题——不需要微调模型。

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
她连续5次上春晚,却被恩师骗同居流产,如今58岁无依无靠太唏嘘

她连续5次上春晚,却被恩师骗同居流产,如今58岁无依无靠太唏嘘

往史过眼云烟
2026-08-24 22:01:09
7万吨铁矿粉,8分钟沉入印度洋,18个中国船员再也回不了家

7万吨铁矿粉,8分钟沉入印度洋,18个中国船员再也回不了家

奇思妙想生活家
2026-08-26 11:29:06
彩票出现断崖式暴跌,“2元中500万”为何没人信了?原因引人深思

彩票出现断崖式暴跌,“2元中500万”为何没人信了?原因引人深思

阿振观点
2026-08-21 05:38:20
十四年青春换72万!体育落幕的现实,钱天一戳中无数球迷内心

十四年青春换72万!体育落幕的现实,钱天一戳中无数球迷内心

运动探索
2026-08-27 11:17:15
古代嫔妃侍寝有三条铁律:一不准出声,另两条脏的连史官都不敢写

古代嫔妃侍寝有三条铁律:一不准出声,另两条脏的连史官都不敢写

千秋文化
2026-08-20 20:39:41
患者自述:一种边缘性行为,让我确诊喉癌!希望大家能引以为戒

患者自述:一种边缘性行为,让我确诊喉癌!希望大家能引以为戒

冷眼看世界728
2026-08-12 09:09:29
582吨“人造太阳”横空出世!海外炸锅:未来连太阳都是中国制造

582吨“人造太阳”横空出世!海外炸锅:未来连太阳都是中国制造

史之铭
2026-08-25 17:02:34
意外发现“饿两天定律”,体重从138斤降到108斤,稳稳瘦下30斤

意外发现“饿两天定律”,体重从138斤降到108斤,稳稳瘦下30斤

解说阿洎
2026-08-19 00:01:42
外交部:中国政府为确保本国公民的安全发布了提醒

外交部:中国政府为确保本国公民的安全发布了提醒

北青网-北京青年报
2026-08-26 16:00:20
穆帅盛赞皇马球星团结;穆帅展现顶级执教功力,妙策赢得维尼修斯的心:让小维尼感受球迷的喜欢,让嘘声变成掌声!

穆帅盛赞皇马球星团结;穆帅展现顶级执教功力,妙策赢得维尼修斯的心:让小维尼感受球迷的喜欢,让嘘声变成掌声!

福酱的小时光
2026-08-27 07:53:42
一个人福气越来越厚的征兆:不是发财,不是走运,而是……

一个人福气越来越厚的征兆:不是发财,不是走运,而是……

曾仕强
2026-08-26 11:32:39
“真拿自己当领导了?”北京职高女孩炫工作照,含金量被无情嘲讽!

“真拿自己当领导了?”北京职高女孩炫工作照,含金量被无情嘲讽!

林林先生
2026-07-24 12:00:08
中国歼-16机群刚一落地,埃及的空军直接看傻了!西方这下要急了

中国歼-16机群刚一落地,埃及的空军直接看傻了!西方这下要急了

黑翼天使
2026-08-25 11:29:21
为什么提出阶级斗争,那些文化人马上进行反对,这个美国人看的准

为什么提出阶级斗争,那些文化人马上进行反对,这个美国人看的准

至死不渝的爱情
2026-07-02 06:12:43
从缅甸被救1年后,王星新进展,现实残酷其下场让人不敢相信

从缅甸被救1年后,王星新进展,现实残酷其下场让人不敢相信

张鴘喜欢软软糯糯
2026-08-21 05:19:16
75年,毛泽东和周恩来同时患上重病,毛泽东问周恩来:江山靠谁守

75年,毛泽东和周恩来同时患上重病,毛泽东问周恩来:江山靠谁守

春秋砚
2026-08-22 06:00:16
就在大家都以为中国会坚决回应时,北京却选择了战略克制。

就在大家都以为中国会坚决回应时,北京却选择了战略克制。

回京历史梦
2026-08-22 18:23:43
埃及国防部一张照片火了,阵风与歼16肩并肩,法国人脸色不好看了

埃及国防部一张照片火了,阵风与歼16肩并肩,法国人脸色不好看了

麓谷隐士
2026-08-26 00:10:03
1600年前的修仙实录出土!考古学家不敢公开,上古史可能是假的?

1600年前的修仙实录出土!考古学家不敢公开,上古史可能是假的?

历史教堂
2026-08-25 16:30:15
北汽董事长:余承东终于闭嘴了,网友:没有他的标准,你一台都不能出厂

北汽董事长:余承东终于闭嘴了,网友:没有他的标准,你一台都不能出厂

大厂财经社
2026-08-25 11:11:25
2026-08-27 12:48:49
码上闲叙
码上闲叙
有态度网友ytd
309文章数 88关注度
往期回顾 全部

科技要闻

苹果邀请函:新CEO、折叠屏iPhone都要来了

头条要闻

"扶老人遭索赔"店主和死者相识 死者儿子发声致歉

头条要闻

"扶老人遭索赔"店主和死者相识 死者儿子发声致歉

体育要闻

因为这条规则,欧联冠军一个夏天散伙了

娱乐要闻

包贝尔承认将柳岩推下水片段引爆热搜

财经要闻

英伟达,营收翻倍大增,指引碾压预期

汽车要闻

搭华为ADS 5/增程纯电可选 阿尔法T7预售13.78万起

态度原创

健康
亲子
游戏
手机
艺术

孩子刷短视频成瘾?9大成瘾真相

亲子要闻

筱梅喂儿子吃米糊,六个月宝宝学会新技能,网友说这孩子越长越像爷爷

《GTA6》成人内容太多 海外主播担心教坏小孩

手机要闻

iPhone换机潮期间,旧机回收价可能在10天内下跌20.2%

艺术要闻

16位中国当代画家的女性油画

无障碍浏览 进入关怀版