网易首页 > 网易号 > 正文 申请入驻

重赏之下必有勇夫的科学依据找到了:《Science》发现超级大奖励可“开挂”学习,多巴胺是幕后功臣

0
分享至


来源:生物学报

长久以来,神经科学和人工智能领域有一个根深蒂固的共识:动物的学习效率主要取决于“学习率”这个固有参数,而与奖励本身的大小关系不大。因此,为了获得足够多的训练数据,实验室中通常给予动物极微小的奖励(如一小滴水)。2026年5月21日,霍华德·休斯医学研究所Luke T. Coddington团队(Sheng Gong为第一作者)在Science在线发表题为“Reward magnitude determines reinforcement learning efficiency”的研究论文,该研究彻底挑战了这一传统,发现将奖励幅度提高一两个数量级,能使小鼠的学习效率飙升十倍以上。其核心机制在于,更大的奖励能引发大脑中多巴胺更持久、更强的释放,而这直接充当了学习的“加速器”。这项研究不仅揭示了多巴胺调节学习的新机制,也表明整个领域可能长期低估了动物的学习能力,并使用了“次优”的训练策略。


传统误区:为求数据,牺牲效率

经典理论认为,强化学习(动物和AI的核心学习方式)的效率由一个相对固定的“学习率”决定。研究者通常给予小鼠极微量的奖励(不足其日常需求的1%),旨在鼓励它们为获得更多奖励而不断重复行为,从而产生大量用于分析的学习“试次”。这被视为标准操作,但代价可能是学习过程被不必要地拉长了。

核心突破:奖励大小决定学习速度

研究团队设计了一系列复杂的任务,包括隐藏目标导航、高难度抓取运动技能和感觉决策。他们比较了标准微量奖励提高10-100倍的“超大奖励”对小鼠初始学习效率的影响。

结果令人震惊:

  • 学习效率飙升:在“超大奖励”下,小鼠学会任务所需的尝试次数减少了一个数量级(即10倍以上)。例如,某些导航任务,标准奖励需数百上千次尝试,而超大奖励下仅需几次就能掌握。

  • 表现质量不减:虽然学得快,但小鼠最终能达到的任务熟练度与标准奖励组无异,排除了“为求快而牺牲精度”的可能。

  • 缩小个体差异:大奖励显著减少了不同小鼠在学习速度上的个体差异,使大多数个体都能快速进入高效学习状态。


从极少数但回报极高的案例中吸取经验教训,往往能迅速见效(图源自Science )

机制揭秘:多巴胺是核心“加速器”

研究从三个层面解释了“超大奖励”为何如此有效:

  1. 提高学习速率:奖励越大,学习新知识的速度越快。

  2. 增强学习保持:能更好地巩固和利用之前学到的经验。

  3. 提升任务专注度:让动物在实验中更投入,减少分心。

而将这三点串联起来的关键分子正是多巴胺。研究人员发现:

  • 奖励大小编码:消费更大奖励时,大脑腹侧纹状体的多巴胺释放不仅幅度更高,持续时间也更长

  • 光遗传学验证:通过光遗传学手段,在给予标准奖励时人为延长多巴胺神经元的激活时间,可以部分模拟大奖励的效果(提高学习速率和专注度),但无法完全复制(例如,无法增强对先前学习的保持能力)。这表明多巴胺信号是主要但非唯一的介质。

深远意义:重塑实验范式与理论认知

这项研究具有多重深远影响:

  • 修正理论模型:它直接将奖励大小与学习效率挂钩,挑战了“学习率固定”的传统强化学习模型,要求理论框架纳入奖励大小的动态调节作用。

  • 优化实验设计:为动物行为学研究提供了强效的“加速”工具。在需要快速训练动物的复杂实验中(如神经环路解析),采用更大奖励可极大提升实验效率,减少动物使用量,符合“3R”原则。

  • 揭示多巴胺新功能:明确了多巴胺信号不仅编码“奖励预测误差”(“惊喜”值),其信号幅度和时长本身就能调控学习的速度和专注度,深化了对多巴胺功能的理解。

  • 启发AI与教育:为人工智能领域调整“奖励函数”以优化学习效率提供了生物学的启发。同时,对人类教育而言,它也隐喻了“即时、充分的正向反馈”对提升学习动力的根本性作用。

当然,研究也指出,大奖励并非在所有学习场景中都完美,例如在某些简单条件反射任务中可能干扰预期行为。但总体而言,这项工作像一道强光,照亮了被传统实验范式所忽视的动物学习的真实潜能,并指出了一个简单而强大的原理:要学得快,有时奖励必须给得足够“重磅”

参考消息:

https://www.science.org/doi/10.1126/science.aeb0813

阅读最新前沿科技趋势报告,请访问21世纪关键技术研究院的“未来知识库”


未来知识库是 “21世纪关键技术研究院”建 立的在线知识库平台,收藏的资料范围包括人工智能、脑科学、互联网、超级智能,数智大脑、能源、军事、经济、人类风险等等领域的前沿进展与未来趋势。目前拥有超过8000篇重要资料。每周更新不少于100篇世界范围最新研究资料。 欢迎扫描二维码或访问https://wx.zsxq.com/group/454854145828进入。

截止到2月28日 ”未来知识库”精选的百部前沿科技趋势报告

(加入未来知识库,全部资料免费阅读和下载)

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
中国没有流浪汉

中国没有流浪汉

文青大叔说
2026-06-02 10:32:31
82年潘汉年恢复名誉,胡均鹤让儿子向上反映:我的事儿该说清楚了

82年潘汉年恢复名誉,胡均鹤让儿子向上反映:我的事儿该说清楚了

史不语
2026-06-02 10:55:03
负债824亿、账上只剩82亿:一群猪,把700亿富豪逼上了悬崖

负债824亿、账上只剩82亿:一群猪,把700亿富豪逼上了悬崖

历史伟人录
2026-05-31 18:28:28
香会上中方发问菲律宾,菲防长语无伦次、答非所问

香会上中方发问菲律宾,菲防长语无伦次、答非所问

环球网资讯
2026-05-31 17:22:34
德国巨头卡了中国30年的空气悬架,被上海嘉定一个镇解决了

德国巨头卡了中国30年的空气悬架,被上海嘉定一个镇解决了

闻识
2026-06-01 02:15:52
彭毕离开泰山就生辉!拜合拉木张英凯都被重用,不换帅继续伤仲永

彭毕离开泰山就生辉!拜合拉木张英凯都被重用,不换帅继续伤仲永

刀锋体育
2026-06-02 09:45:28
英伟达:比亚迪、小米、小马智行等均已采用或正在基于Hyperion平台开发智驾

英伟达:比亚迪、小米、小马智行等均已采用或正在基于Hyperion平台开发智驾

财闻
2026-06-01 13:07:09
从被骂大骗子到全球第一,他为中国熬出又一项核心硬科技

从被骂大骗子到全球第一,他为中国熬出又一项核心硬科技

华商韬略
2026-06-01 10:49:43
明末十大军阀一览表!

明末十大军阀一览表!

寻史者也
2026-06-02 00:47:15
伊能静的二婚也有困境

伊能静的二婚也有困境

情感大头说说
2026-06-02 10:22:39
何超莲晒一家四口全家福,三太陈婉珍脸色蜡黄状态不好,窦骁缺席

何超莲晒一家四口全家福,三太陈婉珍脸色蜡黄状态不好,窦骁缺席

娱乐团长
2026-06-01 21:00:25
最幸福的老年人,就看这10条,一条10分,算算你能得多少分

最幸福的老年人,就看这10条,一条10分,算算你能得多少分

荷兰豆爱健康
2026-06-01 19:40:56
魔术正式任命斯威尼为新帅 他将随马刺打完总决赛

魔术正式任命斯威尼为新帅 他将随马刺打完总决赛

赛场速报局
2026-06-02 00:16:42
2026世界杯小组赛观赛指南(北京时间)

2026世界杯小组赛观赛指南(北京时间)

岳先生悟人间
2026-06-02 08:00:10
母亲葬礼婆家全员缺席,丈夫挂我99通电话,我下令开除他家所有人

母亲葬礼婆家全员缺席,丈夫挂我99通电话,我下令开除他家所有人

千秋文化
2026-05-13 19:39:45
孩子压岁钱账户原有20多万 父母离婚时却只剩40元!母亲称100%花在孩子身上 法院判决:返还22万

孩子压岁钱账户原有20多万 父母离婚时却只剩40元!母亲称100%花在孩子身上 法院判决:返还22万

闪电新闻
2026-06-02 09:38:46
卖了加油站又偷偷抵押,重庆三峡银行2.7亿贷款“三查”严重失职

卖了加油站又偷偷抵押,重庆三峡银行2.7亿贷款“三查”严重失职

法治边角料
2026-06-01 11:40:13
不好笑,日菲要封了中国的出海口?两记重拳打出,菲律宾的天塌了

不好笑,日菲要封了中国的出海口?两记重拳打出,菲律宾的天塌了

谛听骨语本尊
2026-06-01 19:30:05
脑洞大开!美记曝四队大交易,火箭梭哈得到杰伦·布朗,送走小贾

脑洞大开!美记曝四队大交易,火箭梭哈得到杰伦·布朗,送走小贾

体育见习官
2026-06-02 08:30:57
太过现实!NBA毫无温情可言,雷霆输球次日交易球员,不讲情面

太过现实!NBA毫无温情可言,雷霆输球次日交易球员,不讲情面

舞指如飞
2026-06-02 04:15:54
2026-06-02 11:32:49
人工智能学家 incentive-icons
人工智能学家
人工智能领域权威媒体
4785文章数 37472关注度
往期回顾 全部

科技要闻

英伟达RTX Spark 很猛,但首批机型不便宜

头条要闻

牛弹琴:伊朗突然发飙 特朗普急了打电话痛骂以色列

头条要闻

牛弹琴:伊朗突然发飙 特朗普急了打电话痛骂以色列

体育要闻

1米74的业余联赛替补,在英超踢中卫

娱乐要闻

奚梦瑶何猷君婚礼曝光 深情热吻甜蜜

财经要闻

锂电“资源墙”高筑 全球性长期博弈开始

汽车要闻

星途神秘新车轮廓曝光 又一款性能SUV要来了?

态度原创

亲子
教育
旅游
游戏
公开课

亲子要闻

其实《小王子》里面,藏着大量育儿真相!

教育要闻

四年级简便计算,9000÷25x4=?

旅游要闻

行进中国|长江夜未央 遇见无处不在

《骑士之路》公布可恋爱对象再遭DEI人士围攻

公开课

李玫瑾:为什么性格比能力更重要?

无障碍浏览 进入关怀版