网易首页 > 网易号 > 正文 申请入驻

何恺明ResNet登顶,Transformer加冕!Nature独家揭秘25篇高被引论文

0
分享至


新智元报道

编辑:桃子

【新智元导读】21世纪最具影响力的25篇论文中,AI论文竟然独占鳌头!从席卷全球的ResNet到奠定ChatGPT基础的Transformer架构,Nature独家揭秘全球高被引论文。

21世纪第一个25年,AI领域被引最高25篇论文都有哪些?

近日,Nature头版独家文章,揭秘了不同科学领域最具影响力的论文。


然而,令人意外的是,那些广为人知的科学发现:从mRNA疫苗和CRISPR基因编辑技术,到希格斯玻色子的发现和引力波的首次测量,并没有出现在这些入选的论文中。

他们得出结论,被引最高的论文,正是描述科学方法、软件工具或系统性综述的「幕后英雄」。

那么,都有哪些论文上榜了呢?


引用:科学影响力的衡量标准

引用是学术界衡量论文影响力的重要指标,作者通过引用来致敬前人的工作。

Nature的分析基于五个学术数据库(涵盖了21世纪数千万篇论文),通过取中位数排名,筛选出本世纪最受引用的25篇论文。

结果显示,人工智能、提升研究质量提升、癌症统计、研究软件相关的论文占据了榜单前列。

唯一例外是一篇2004年关于石墨烯实验的开创性论文,这项工作为作者赢得了2010年的诺贝尔物理学奖。

AI崛起,ResNet登顶

人工智能论文,在本世纪引用榜单中独领风骚。

位居榜首的是,微软团队2016年发表的一篇论文——Deep Residual Learning for Image Recognition。

这恰恰是所有人熟知的「深度残差学习」神经网络——ResNets的开山之作,由AI大牛孙剑带队何恺明等人完成。


论文地址:https://arxiv.org/abs/1512.03385

ResNets解决了信号在多层网络中传播时衰减的问题,让研究人员能够训练约150层神经网络。

这大约是当时常规神经网络层数的5倍。


该论文首次作为预印本发布于2015年末,微软团队凭借其在图像识别竞赛中夺冠。

ResNets的突破为AI飞速发展铺平了道路,催生了AlphaGo、AlphaFold、ChatGPT等模型诞生。

现就职于麻省理工学院的何恺明表示,「在ResNets之前,深度学习并不那么『深』」。

据统计,这篇论文的引用量在10万-25.4万次之间。在五个数据库中有两个将其列为第一,两个列为第二,一个列为第三,综合中位数排名第一。


Google Scholar这篇论文被引数已超25万

此外,2017年谷歌发表的Attention is all you need排位列七,论文中提出了著名的Transformer架构,成为ChatGPT等大模型的核心。


论文地址:https://arxiv.org/pdf/1706.03762

AI论文的高引用量,主要是因为其广泛的应用领域和快速的研究进展。

同样,AI教父Geoff Hinton指出,「AI论文天然具有引用优势」。

2012年,Hinton带领学生Ilya、Alex Krizhevsky发表的AlexNet论文排名第八。

这篇巨作展示了神经网络在图像识别竞赛中的压倒性优势,掀起了后来的深度学习革命。


论文地址:https://proceedings.neurips.cc/paper_files/paper/2012/file/c399862d3b9d6b76c8436e924a68c45b-Paper.pdf


此外,开源也助推了AI论文的引用。

比如排名第六的Random Forests论文介绍了一种开源、易用的机器学习算法,广泛应用于多个领域。


论文地址:https://link.springer.com/article/10.1023/A:1010933404324

需要说明的是,许多AI论文以预印本形式发布,增加了引用统计的复杂性。

OpenAlex数据库尝试合并预印本与最终出版物的引用,而Google Scholar则努力将同一作品的所有版本归类并汇总引用。

研究软件:科学家的「工具箱」

除了AI领域,研究软件相关论文在本世纪引用榜单中表现亮眼。

排名第二的论文由Thomas Schmittgen等人于2000年发表,介绍了一种用于定量PCR(聚合酶链式反应)数据分析的方法。

这篇论文应审稿人要求而生,因其提供了计算基因活性变化的简单公式,被引量超过16.2万次,跻身历史前十。


论文地址:https://www.sciencedirect.com/science/article/abs/pii/S1046202301912629

排名第五的论文,是由英国化学家George Sheldrick撰写,介绍SHELX程序套件,用于分析X射线散射模式以揭示分子结构。

这篇2008年的综述论文建议使用SHELX时引用,引用量在7万至9万次之间。


论文地址:https://journals.iucr.org/a/issues/2008/01/00/sc5010/index.html

其他软件论文,如排名第十五的scikit-learn(Python机器学习库)和排名第十八的DESeq2(RNA测序分析),因其开源和易用性,成为科学家不可或缺的工具。

统计软件:数据分析的利器

统计软件相关论文,也在榜单中名列前茅。

例如,排名第15的scikit-learn论文和排名第22的lme4论文分别为Python和R语言用户提供了强大的数据分析工具。

排名第23的G*Power软件论文则帮助生物学家计算实验所需的样本量,以确保统计显著性。

值得注意的是,R编程语言本身未出现在榜单中,尽管OpenAlex记录其引用量超过30万次。

这是因为R的开发者建议用户引用其网站而非学术论文,导致数据库记录不一致。

这也提醒研究者:若开发了有影响力的程序,发表一篇相关论文至关重要。

癌症与健康:数据驱动的洞见

癌症研究领域的三篇论文在榜单中占据重要位置。

排名第四的Diagnostic and Statistical Manual of Mental Disorders(DSM-5)是精神病学领域的权威指南,2013年出版后广泛用于研究和临床,定义了精神障碍的诊断标准。

排名第九和第十的是世界卫生组织GLOBOCAN项目于2018年和2020年发布的全球癌症统计报告,为研究者和政策制定者提供了关键数据。

排名第十九的综述论文总结了癌症的「标志性特征」,激励了无数学生投身癌症研究。

提升研究质量

提升研究质量的论文在本世纪引用榜单中熠熠生辉。排名第三的论文Using thematic analysis in psychology,由心理学家Virginia Braun和Victoria Hannah Clarke于2006年发表,介绍了「主题分析」——一种分析定性数据的系统方法。

这篇为学生设计的指南意外成为本世纪第三高引用论文,彻底改变了两位作者的职业轨迹。

排名第11的PRISMA声明(2009年)为系统综述和荟萃分析提供了27项报告规范,引用量在5.3万至13.8万次之间。

2020年更新的PRISMA(排名第23)同样上榜。排名第17的论文(2003年)讨论了行为研究中的方法偏差,帮助研究者提高研究严谨性。

参考资料:

https://www.nature.com/articles/d41586-025-01125-9

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
《灼灼韶华》韶华到死不知,大顺有多防她,陈先魁对她算计有多狠

《灼灼韶华》韶华到死不知,大顺有多防她,陈先魁对她算计有多狠

阿讯说天下
2025-09-14 12:40:05
贫富差距,又大了

贫富差距,又大了

大碗楼市
2025-09-15 08:05:09
3战轰34+23!若余嘉豪在西乙闯出名堂,将是男篮另一条线奠基人物

3战轰34+23!若余嘉豪在西乙闯出名堂,将是男篮另一条线奠基人物

弄月公子
2025-09-14 20:35:49
计划经济试验为何在多国折戟?孙玉良:面临从上到下利他主义难题

计划经济试验为何在多国折戟?孙玉良:面临从上到下利他主义难题

孙玉良
2025-09-14 08:37:40
可用额度600多元却被盗刷将近2万元,浦发信用卡被集中盗刷之谜

可用额度600多元却被盗刷将近2万元,浦发信用卡被集中盗刷之谜

大风新闻
2025-09-15 11:33:04
不查不知道一查吓一跳,坐拥北京60亩马场的于谦,私下到底有多壕

不查不知道一查吓一跳,坐拥北京60亩马场的于谦,私下到底有多壕

鱼书影视
2025-09-15 10:54:38
柯文哲将重开羁押庭,沈政男建议法官比照绿议员案子:维持原裁定

柯文哲将重开羁押庭,沈政男建议法官比照绿议员案子:维持原裁定

海峡导报社
2025-09-14 15:44:04
快讯!西贝突然撤回致歉信!

快讯!西贝突然撤回致歉信!

鞭牛士
2025-09-15 13:32:11
上海中心城区,“原拆原建”小区居民回家!这群平均年龄不到35岁的青年人,曾打了5000多个电话

上海中心城区,“原拆原建”小区居民回家!这群平均年龄不到35岁的青年人,曾打了5000多个电话

新民晚报
2025-09-15 15:44:18
39岁老总包养19岁女大学生,结果被剁成265块,凶案现场被曝光…

39岁老总包养19岁女大学生,结果被剁成265块,凶案现场被曝光…

极品小牛肉
2024-02-05 17:24:40
体制内出轨的多吗?网友:我单位的好多都离了,还有不少生二胎的

体制内出轨的多吗?网友:我单位的好多都离了,还有不少生二胎的

带你感受人间冷暖
2025-09-11 00:10:11
美国就算一动不动,中国20年也追不上?九三阅兵后,局势已被改写

美国就算一动不动,中国20年也追不上?九三阅兵后,局势已被改写

来科点谱
2025-09-09 09:06:46
为什么中国社保会走到今天?看中国社保的矛盾与制度

为什么中国社保会走到今天?看中国社保的矛盾与制度

老丁是个生意人
2025-08-20 00:17:31
我和陌生女人在工地做了5年夫妻,分别那天才知道她的真实身份

我和陌生女人在工地做了5年夫妻,分别那天才知道她的真实身份

荔子言
2025-09-14 13:55:58
南京天鹅堡业主两年亏掉322万!这小区房价跌超三成,谁能扛得住?

南京天鹅堡业主两年亏掉322万!这小区房价跌超三成,谁能扛得住?

石辰搞笑日常
2025-09-15 11:30:11
WTT澳门赛曝丑闻,本土冠军比赛时被骚扰,与樊振东遭遇高度相似

WTT澳门赛曝丑闻,本土冠军比赛时被骚扰,与樊振东遭遇高度相似

胡一舸南游y
2025-09-15 15:24:55
中国女农场主在赞比亚遇难,死因曝光!韩红的话,终于有人信了

中国女农场主在赞比亚遇难,死因曝光!韩红的话,终于有人信了

来科点谱
2025-08-06 09:11:25
一厢情愿导致中朝交恶,1993年申奥失败与朝鲜到底有无关系?

一厢情愿导致中朝交恶,1993年申奥失败与朝鲜到底有无关系?

冰雅忆史
2025-09-07 03:40:03
祝绪丹时隔两年再祝杨幂生日快乐,杨幂的回复没给她留一丝面子

祝绪丹时隔两年再祝杨幂生日快乐,杨幂的回复没给她留一丝面子

圆圆神神神
2025-09-14 20:06:53
看了张晋日常,就懂为何血管能堵80%,蔡少芬:再晚发现人就没了

看了张晋日常,就懂为何血管能堵80%,蔡少芬:再晚发现人就没了

一娱三分地
2025-08-19 19:13:59
2025-09-15 16:44:49
新智元 incentive-icons
新智元
AI产业主平台领航智能+时代
13449文章数 66151关注度
往期回顾 全部

科技要闻

官方:英伟达违反反垄断法 将施进一步调查

头条要闻

数百名韩国工人在美被捕 韩国工会要求特朗普就此道歉

头条要闻

数百名韩国工人在美被捕 韩国工会要求特朗普就此道歉

体育要闻

诺维茨基退役十年后,德国篮球走向巅峰

娱乐要闻

知名男演员官宣三胎

财经要闻

西贝发布致歉信:10月1日前完成整改

汽车要闻

空间、科技、驾控全在线 Q5L现款优惠不容错过

态度原创

旅游
教育
房产
手机
公开课

旅游要闻

热闻|清明假期将至,热门目的地有哪些?

教育要闻

开学换校长?学校的“灵魂人物”走了,会影响娃儿不?

房产要闻

当海口书包房卷向「未来」,这里的孩子和房价,都在高速超车!

手机要闻

魅族 22 可能是最后一代白面板手机,三配色外观公布

公开课

李玫瑾:为什么性格比能力更重要?

无障碍浏览 进入关怀版