网易首页 > 网易号 > 正文 申请入驻

厦门大学等突破AI自学限制:让计算机为自己量身定制学习计划

0
分享至


这项由厦门大学、华盛顿大学圣路易斯分校和中国人民大学联合开展的研究发表于2026年1月的arXiv预印本平台,论文编号为arXiv:2601.22628v1。有兴趣深入了解的读者可以通过该编号查询完整论文。

当我们学习新知识时,一个好老师会根据我们的能力水平调整教学难度,从简单的概念开始,逐步增加挑战性。然而,现在的人工智能系统在面对考试时,就像一个没有经验的学生,只能硬着头皮去解那些远超自己能力范围的难题。更糟糕的是,当它们试图通过自己的答案来学习时,往往会被错误的答案误导,就像一个人在黑暗中摸索,很容易走向错误的方向。

研究团队发现了这个问题的核心所在。当前的AI系统在面临困难数学题时,就像让一个刚学会加法的孩子去解微积分题一样,几乎注定会失败。更关键的是,这些系统缺乏一个像人类导师那样的引导者,能够为它们提供适合当前水平的练习题目。

为了解决这个问题,研究团队开发了一个名为TTCS(Test-Time Curriculum Synthesis for Self-Evolving)的创新框架。这个系统的巧妙之处在于,它就像为AI配备了两个角色:一个是出题老师,另一个是解题学生。这两个角色会相互配合,共同进化。

出题老师的任务是根据解题学生的当前能力水平,生成既有挑战性又不会太困难的练习题。就像一个经验丰富的数学老师,他会观察学生的解题表现,然后调整题目的难度。如果学生总是答对,老师会增加难度;如果学生总是答错,老师会降低难度,找到那个刚好让学生需要努力思考才能解决的甜蜜点。

解题学生则负责在这些精心设计的练习题上进行训练,不断提升自己的解题能力。关键在于,这些练习题都是根据它的实际能力量身定制的,既不会太简单让它无法进步,也不会太困难让它完全摸不着头脑。

这种相互促进的学习机制带来了令人瞩目的效果。在具有挑战性的数学竞赛题目测试中,使用TTCS框架的AI系统表现出了显著的进步。以AIME24(美国数学邀请赛2024年题目)为例,原本只能达到7.1分的AI系统,在经过TTCS训练后能够达到19.79分,提升幅度超过了12分。这相当于一个原本只能解决基础题目的学生,经过针对性训练后能够挑战中等难度的竞赛题目。

更让人惊喜的是,这种在数学领域获得的能力提升还能够迁移到其他领域。当研究团队测试这些经过TTCS训练的AI系统在常识推理、科学问答等任务上的表现时,发现它们同样表现出了明显的进步。这说明通过精心设计的课程学习,AI系统不仅能在特定领域变得更强,还能培养出更通用的推理和问题解决能力。

研究团队还进行了深入的分析实验,探索了TTCS框架各个组件的重要性。他们发现,如果缺少了出题老师的动态调整机制,仅仅使用固定的练习题,AI系统的进步幅度会显著降低。这进一步证实了自适应课程设计的重要性。

另一个有趣的发现是,即使使用能力更强的AI模型作为固定的出题老师,其效果也不如能够动态调整的出题老师。这就像即使请来了世界上最优秀的数学家来出题,如果他不了解学生的具体情况,无法根据学生的进步调整教学内容,效果反而不如一个能够密切关注学生学习状态的普通老师。

在数据效率方面,TTCS框架也展现出了优秀的表现。即使只有很少的练习题目,比如只有原本数量的10%,经过TTCS训练的AI系统仍然能够取得显著进步。这对于实际应用具有重要意义,因为在很多情况下,获得大量高质量的训练数据是困难且昂贵的。

研究团队还通过案例分析展示了TTCS框架如何逐步提升出题质量。在训练初期,出题老师生成的练习题往往比较简单,甚至可能只是原题的简单变形。但随着训练的进行,出题老师学会了创造更有挑战性、更具创新性的题目,这些题目在保持与原题相同推理结构的同时,采用了不同的数学背景和问题设置。

这项研究的意义不仅限于数学问题解决。它提出的自适应课程学习思想可以应用到各种AI训练场景中。无论是语言理解、图像识别,还是机器人控制,都可以从这种根据当前能力水平动态调整学习内容的方法中受益。

从技术实现角度来看,TTCS框架采用了一种叫做Group Relative Policy Optimization(GRPO)的优化算法。这个算法就像一个精密的反馈调节器,能够根据AI系统在不同题目上的表现,精确调整其学习方向和强度。出题老师会根据解题学生的成功率来评估题目难度,优先生成那些学生大约有50%把握能够解决的题目,因为这个难度水平最能促进学习进步。

在奖励机制设计上,研究团队采用了多重考量。除了确保题目难度适中外,还要求生成的题目具有足够的多样性,避免简单重复。这就像一个负责任的老师,不仅要确保题目难度合适,还要保证题目类型丰富,能够从不同角度锻炼学生的思维能力。

实验结果显示,TTCS框架在多个不同规模的AI模型上都取得了一致的性能提升。从15亿参数的小模型到70亿参数的大模型,都能从这种自适应学习方法中获益。这表明该方法具有良好的通用性和可扩展性。

值得注意的是,这种自学习能力的提升并非通过增加模型规模或使用更多计算资源实现的,而是通过更智能的学习策略获得的。这为AI系统的高效训练提供了新的思路,特别是在计算资源有限的情况下,如何最大化学习效果。

研究团队还探索了跨领域迁移的可能性。他们发现,在一个数学子领域(如代数)上训练的AI系统,能够将学到的推理能力迁移到其他数学子领域(如几何),甚至迁移到完全不同的领域如常识推理。这种迁移能力的存在,证明了TTCS框架培养的不仅是解决特定问题的技巧,更是通用的推理和问题解决能力。

从更广阔的视角来看,这项研究为AI系统的自主学习和持续改进提供了新的可能性。传统的AI训练往往需要大量人工标注的数据和专家设计的课程,而TTCS框架展示了AI系统如何通过自我反思和自适应调整实现持续进步。这种能力对于开发更加智能和自主的AI系统具有重要意义。

说到底,这项研究的核心贡献在于证明了AI系统也可以像人类学习者一样,通过接受适合自己水平的挑战来实现稳步进步。它不再是盲目地面对超出能力范围的难题,而是在一个精心设计的学习环境中,通过不断练习和调整来提升自己。这种学习方式不仅更加高效,而且更加可持续,为AI系统的长期发展和应用开辟了新的道路。这项研究还表明,AI系统的发展不一定需要依赖更大的模型或更多的数据,有时候更聪明的学习策略能够带来同样甚至更好的效果。随着这类技术的进一步发展和完善,我们可能会看到更多能够自主学习和持续进步的AI系统出现在我们的日常生活中,为教育、科研、工程等各个领域带来革命性的变化。

Q&A

Q1:TTCS框架是如何工作的?

A:TTCS就像给AI配备了一个出题老师和一个解题学生。出题老师根据学生的能力水平生成合适难度的练习题,学生在这些题目上训练后能力提升,然后老师再调整题目难度。两者相互促进,实现共同进化,最终让AI在数学推理等任务上取得显著进步。

Q2:为什么TTCS比传统的AI训练方法更有效?

A:传统方法让AI直接面对超出能力的难题,就像让小学生做高考题一样注定失败。TTCS则根据AI的实际能力提供合适的挑战,避免了因题目太难导致的错误学习,也避免了因题目太简单导致的停滞不前,确保AI始终在最佳的学习区间内进步。

Q3:TTCS框架的应用前景如何?

A:除了数学问题,TTCS的自适应学习思想可以应用到语言理解、图像识别、机器人控制等各种AI任务中。它为AI系统的高效训练提供了新思路,特别适合计算资源有限但需要持续改进的场景,未来可能在教育、科研、工程等领域带来革命性变化。

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
世体回顾C罗谈姆巴佩:皇马本来就强,签下他不见得会更进一步

世体回顾C罗谈姆巴佩:皇马本来就强,签下他不见得会更进一步

懂球帝
2026-05-10 20:37:16
全职爸爸靠帅脸火了,全网却为他的“豪门婚姻”吵翻了

全职爸爸靠帅脸火了,全网却为他的“豪门婚姻”吵翻了

妈咪OK
2026-05-08 19:54:01
被家里的“隐形脏臭”折磨疯了?这8款世净清洁神器,快速还你清新与健康!【君之优选】

被家里的“隐形脏臭”折磨疯了?这8款世净清洁神器,快速还你清新与健康!【君之优选】

君之烘焙
2026-05-09 20:15:49
英国首相斯塔默任命前首相戈登·布朗为全球金融与合作特使

英国首相斯塔默任命前首相戈登·布朗为全球金融与合作特使

新京报
2026-05-09 19:35:08
累计4黄停赛,山东外援阿尔瓦罗将无缘下轮主场战重庆铜梁龙

累计4黄停赛,山东外援阿尔瓦罗将无缘下轮主场战重庆铜梁龙

懂球帝
2026-05-10 19:03:30
人到中年才发现一个饭局定律:酒桌上,那个不喝酒、不说话、只埋头吃菜的人,往往是这两种

人到中年才发现一个饭局定律:酒桌上,那个不喝酒、不说话、只埋头吃菜的人,往往是这两种

心理观察局
2026-04-29 15:46:18
不是玄学!家里若现这4大怪象,恭喜住进聚宝盆,有一条就偷着乐

不是玄学!家里若现这4大怪象,恭喜住进聚宝盆,有一条就偷着乐

手工制作阿爱
2026-05-09 01:32:24
陈涛:与山东队这样的强队存在差距,对球员拼搏精神感到满意

陈涛:与山东队这样的强队存在差距,对球员拼搏精神感到满意

懂球帝
2026-05-10 21:10:26
29岁中国工程师背叛马斯克,套现700万,偷走核心代码投奔死对头

29岁中国工程师背叛马斯克,套现700万,偷走核心代码投奔死对头

阿器谈史
2026-05-10 04:03:40
缺钾比缺钙危险?5个信号证明你缺钾了,建议吃这5种食物缓解

缺钾比缺钙危险?5个信号证明你缺钾了,建议吃这5种食物缓解

健康之光
2026-05-07 20:50:03
光纤行业迎重大利好,外资悄然布局3家低价标的

光纤行业迎重大利好,外资悄然布局3家低价标的

王二哥老搞笑
2026-05-10 13:08:16
安徽巨星夜崩盘,穷到欠薪却敢办大型演唱会,粉丝沦为韭菜太扎心

安徽巨星夜崩盘,穷到欠薪却敢办大型演唱会,粉丝沦为韭菜太扎心

法老不说教
2026-05-09 15:11:16
柯志恩民调大跳水,王金平也拉不动,郑丽文那句警告应验了

柯志恩民调大跳水,王金平也拉不动,郑丽文那句警告应验了

放开他让wo来
2026-05-10 16:28:56
R.I.P.,巴萨官方:向弗里克致以深切慰问,沉痛哀悼其父亲逝世

R.I.P.,巴萨官方:向弗里克致以深切慰问,沉痛哀悼其父亲逝世

懂球帝
2026-05-10 20:16:52
铁证面前,还能撤案?深扒无果、信息全封,路虎车主背景有多硬?

铁证面前,还能撤案?深扒无果、信息全封,路虎车主背景有多硬?

世界圈
2026-03-24 12:52:50
隋维杰:我们也是大连人,代表着大连的球队

隋维杰:我们也是大连人,代表着大连的球队

懂球帝
2026-05-10 18:20:16
活活吓死!网传69岁老人查出肺癌晚期,老伴告知真相后三日便离世

活活吓死!网传69岁老人查出肺癌晚期,老伴告知真相后三日便离世

火山詩话
2026-05-09 21:45:51
74年李先念找到李德生,沉默半晌后说:要你辞职,是毛主席的建议

74年李先念找到李德生,沉默半晌后说:要你辞职,是毛主席的建议

鹤羽说个事
2026-03-27 22:49:42
两名医务人员被判刑!国家多部门出手,严厉整治这类行为

两名医务人员被判刑!国家多部门出手,严厉整治这类行为

医脉圈
2026-05-10 20:05:38
无锡一知名面包店停业

无锡一知名面包店停业

无锡eTV全媒体
2026-05-10 17:37:51
2026-05-10 22:19:00
科技行者 incentive-icons
科技行者
科技正在如何变革商业世界
8282文章数 563关注度
往期回顾 全部

科技要闻

DeepSeek融资,改写所有人的估值

头条要闻

谈判陷僵局 世界杯转播费报价大幅降低央视仍不接招

头条要闻

谈判陷僵局 世界杯转播费报价大幅降低央视仍不接招

体育要闻

那个曾让詹姆斯抱头的兄弟,40岁从大学毕业了

娱乐要闻

赵露思老实人豁出去了 没舞蹈天赋硬跳

财经要闻

白酒大逃杀

汽车要闻

轴距加长/智驾拉满 阿维塔07L定位大五座SUV

态度原创

房产
手机
旅游
健康
军事航空

房产要闻

低价甩卖!海口这个地标商业,无人接盘!

手机要闻

iQOO 15T手机现身中国电信终端产品库,预计本月上市

旅游要闻

如花缤纷、似叶静美,浦东缤纷花海绘就生态文旅新画卷

干细胞能让人“返老还童”吗

军事要闻

伊朗革命卫队深夜警告

无障碍浏览 进入关怀版