网易首页 > 网易号 > 正文 申请入驻

想做能终身学习的 AI?先得教会它如何忘记

0
分享至

多年来,计算机科学家一直非常严格的视角看待人工智能。

当人工智能系统学习新任务或信息时,它会覆盖之前学到的一些内容,这种现象被称为“灾难性遗忘”。历史上这个领域一直把这当作一个缺陷,试图用诸如存储大量旧数据等变通方法来修补。

但在发表于《机器学习基础与趋势》的一篇新专题论文中,莱斯大学商学院运营管理助理教授刘岳阳与斯坦福大学的合著者提出,遗忘对人工智能而言并非单纯的故障。在现实场景中,这类系统面临着内存与算力的硬性约束,它们不能、也不应该试图记住一切。

相反,人工智能应该优先考虑“持久知识”。

人工智能如何持续学习用户

当音乐应用用户30岁时,12岁时最喜欢的歌手是谁可能已经无关紧要——至少对推荐新音乐的AI来说是这样。更重要的是,倾听中的模式很可能在未来依然适用。



图源:news.rice.edu

研究人员称之为“持久知识”:即信息能随着时间保持有用的价值。为了保留这些知识的空间,系统必须丢弃过时或低价值的数据。

传统机器学习通常假设训练最终会结束。在这些模型中,系统学习一个稳定目标——例如,一个训练用于识别照片中猫的图像分析仪——一旦达到该目标,训练就基本结束了。按照这个逻辑,灾难性的遗忘看起来就是灾难性的失败。

但刘教授及其合著者的研究出发点截然不同:世界始终在变化,因此人工智能必须持续适应才能保持效用。音乐或电影推荐系统不能假定用户的品味一成不变,如果它停止更新对用户的认知,就会失去推荐价值,因此它必须持续探索。

“作为人类,我们不会记住过去的每一个细节。” 刘教授表示,“一个持续学习的系统也必须做出相似的取舍,判断哪些信息值得留存。”

有限算力下的人工智能生存之道

为验证这一观点,刘教授与同事开展了模拟实验,测试不同算法在计算资源有限的条件下随时间推移的表现。

其中一项实验采用了改进版的置换 MNIST基准测试 —— 这是一套常用于手写数字分类任务的通用测试基准。在实验中,环境持续发生变化,迫使 AI 接连应对不断更迭的任务,而非专注于某一项固定任务。

研究人员比较了三种智能体:一种能够保存100万个过去样本;一种限制为1000个样本的小型智能体;以及一个“重置”智能体,其神经网络会定期被清除。

这些结果挑战了该领域的一些常规假设。在不会重复出现的任务上,小内存智能体的表现与大内存智能体不相上下,说明留存一次性数据并无长期收益。即便重置型智能体,只要重复任务的持续时间足够长,它也能通过重新学习掌握所需知识,跟上性能节奏。

最值得关注的是,当研究人员施加更严格的算力限制时,大内存系统的灵活性反而出现下降。它们遭遇了可塑性丧失问题:系统变得过于僵化,难以良好地吸收新信息。

刘说:“如果一个系统试图保留一切,它可能会失去适应能力。”“在真实限制下,选择性遗忘往往是让学习成为可能的关键。”

另一组在类推荐场景下开展的模拟实验也得出了相似结论:优先保留长期行为模式、而非短暂流行趋势的智能体,长期获得的奖励更高。

思考如何持续学习

这项研究为持续学习提供了一种更统一的思考方式,这一领域常被划分为记忆保持、快速再学习或计算效率等更狭窄的问题。刘和她的合著者认为,这些问题应通过统一的持续学习框架进行分析,以最大化在实际资源限制下的长期表现。

这一学科视角的转变,也重新定义了灾难性遗忘的意义:留存所有过往信息并非最优选择,选择性舍弃非重复性或低价值信息,或许正是帮助系统在漫长生命周期中持续学习的核心。

当然,这套框架并不能解决所有实际挑战。在复杂的现实环境中,精确的数学求解依然困难;而要实现更多能力,仍需要许多系统尚不具备的内存与算力支撑。但这篇论文为后续研究奠定了更清晰的基准。

对于研发终身学习人工智能的研究者而言,这意味着目标或许不再是追求完美的记忆能力,而是实现出色的判断力。一个智能的系统不需要记住多年前的每一个细节,它只需要留住仍有价值的内容,放下其余的一切。

本文由雷科技编译自news.rice.edu

原文链接:https://news.rice.edu/news/2026/build-lifelong-ai-teach-it-forget

7月31日,主题为“与AI同游”的ChinaJoy2026重磅启幕。
腾讯、网易、索尼、高通、迈从、清闲等共计 900 家泛娱乐展商,联袂呈现全球娱乐业饕餮盛宴;
AI加持下,终端、外设、机器人、显示、芯片等硬科技品牌,如何与游戏内容业跨界呈现娱乐新体验?
由创始人兼总编辑罗超领衔,雷科技 ChinaJoy 2026 报道团,即将空降上海滩重磅呈现,敬请关注。



特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
第二个许家印!又一首富栽了!世界500强竟是假的,千亿帝国清零

第二个许家印!又一首富栽了!世界500强竟是假的,千亿帝国清零

米果说识
2026-07-06 19:32:42
罗马诺:皇马已经要求卡洛斯-埃斯皮等待他们的行动

罗马诺:皇马已经要求卡洛斯-埃斯皮等待他们的行动

懂球帝
2026-07-31 03:54:07
1973年,广西舞蹈演员自称毛泽东的女儿,主席得知后:我想见见她

1973年,广西舞蹈演员自称毛泽东的女儿,主席得知后:我想见见她

大运河时空
2026-07-29 10:15:03
新冠病毒高发期!医生建议:家里常备这2种药,关键时刻能救命

新冠病毒高发期!医生建议:家里常备这2种药,关键时刻能救命

健康之光
2026-07-28 17:20:09
姆巴佩27岁牵手西班牙国宝级女星

姆巴佩27岁牵手西班牙国宝级女星

手工制作阿歼
2026-07-31 01:36:09
日本皇室“纯爱故事”再来!爱子公主与竹马约会,民众大力支持

日本皇室“纯爱故事”再来!爱子公主与竹马约会,民众大力支持

这里是东京
2026-07-29 17:38:21
男性“最耗阳”行为,不是喝酒而是这些,排第一的,看看你在做吗

男性“最耗阳”行为,不是喝酒而是这些,排第一的,看看你在做吗

熊猫医学社
2026-06-30 11:30:03
7月19日刚交了20000多元,25日就突发闭店!知名品牌两门店停摆!回应:没跑路,经营承压,正积极化解

7月19日刚交了20000多元,25日就突发闭店!知名品牌两门店停摆!回应:没跑路,经营承压,正积极化解

鲁中晨报
2026-07-28 16:32:08
我年轻时向一个要好的姑娘表白,她说:想多了吧,我把你当好哥们

我年轻时向一个要好的姑娘表白,她说:想多了吧,我把你当好哥们

秀秀情感课堂
2026-07-30 13:50:08
百姓躺平摆烂,食税群体怎么办?

百姓躺平摆烂,食税群体怎么办?

律法刑道
2026-06-03 09:30:48
龚孟建当选山西长治市市长

龚孟建当选山西长治市市长

界面新闻
2026-07-30 13:18:10
农行、中行、建行、华夏银行等出手,5年期大额存单“重出江湖”,利率最高1.8%!有人赶紧存20万元:跟捡漏似的

农行、中行、建行、华夏银行等出手,5年期大额存单“重出江湖”,利率最高1.8%!有人赶紧存20万元:跟捡漏似的

每日经济新闻
2026-07-30 14:41:04
中日要有重头戏,高市将借机访华?中方已换将,日本需满足一要求

中日要有重头戏,高市将借机访华?中方已换将,日本需满足一要求

寻迹追心
2026-07-30 05:23:19
憔悴全写在脸上!诗妮娜出席公务状态大不如前,回泰几天忙得飞起

憔悴全写在脸上!诗妮娜出席公务状态大不如前,回泰几天忙得飞起

动物奇奇怪怪
2026-07-31 00:52:18
SpaceX猎鹰9号火箭下月撞击月球,科学家预计可观测到喷射羽流

SpaceX猎鹰9号火箭下月撞击月球,科学家预计可观测到喷射羽流

IT之家
2026-07-30 21:37:11
茄子再次被关注!医生含泪警告:茄子尽量别这样吃,比砒霜还毒

茄子再次被关注!医生含泪警告:茄子尽量别这样吃,比砒霜还毒

老李讲健康
2026-07-29 18:00:03
正史一字不提,野史写到起飞

正史一字不提,野史写到起飞

我是历史其实挺有趣
2026-07-30 10:24:38
阿根廷4600万人口,拥有超1500万辆汽车,福建4200万人有多少?

阿根廷4600万人口,拥有超1500万辆汽车,福建4200万人有多少?

抽象派大师
2026-07-29 16:26:26
研究发现:一旦吃上降压药,3件事就别做了,不要害了自己?

研究发现:一旦吃上降压药,3件事就别做了,不要害了自己?

小胡军事爱好
2026-07-30 19:20:25
俄罗斯军事专家:“全世界,只有中国自己不知道自己有多么强大”

俄罗斯军事专家:“全世界,只有中国自己不知道自己有多么强大”

农夫史记
2026-05-23 21:16:39
2026-07-31 04:48:49
雷科技 incentive-icons
雷科技
专注AI硬科技
37509文章数 812319关注度
往期回顾 全部

科技要闻

小米澎程N90 Max预售价29.99万

头条要闻

陕西"公公强奸儿媳案"维持原判 女方精神鉴定结果公布

头条要闻

陕西"公公强奸儿媳案"维持原判 女方精神鉴定结果公布

体育要闻

曝皇马将签罗德里!转会费6000万签约4年

娱乐要闻

周星驰用态度打破快餐式宣发

财经要闻

中共中央政治局:提升资本市场韧性和信心

汽车要闻

FREELANDER神行者8下线 8月10日开启预售/海外版同步推进

态度原创

手机
教育
房产
旅游
公开课

手机要闻

三星高管暗示Galaxy S26 FE手机将至,有望亮相2026年IFA展会

教育要闻

数字太大,不会做的人太多,放现在很多同学还是不会计算

房产要闻

这个大平层,彻底打破了海口核心资产认知!

旅游要闻

这场校园里的夏日旅行 让华裔少年在大理读懂中华文化

公开课

李玫瑾:为什么性格比能力更重要?

无障碍浏览 进入关怀版