网易首页 > 网易号 > 正文 申请入驻

离了大谱,21%的ICLR 2026审稿意见竟是AI生成的?官方回应来了

0
分享至



机器之心报道

机器之心编辑部

刚过去的这个周末,围绕 ICLR 2026 审稿意见中很多被标记为完全由 AI 生成的说法,引发了社区热烈讨论。本届会议将于 2026 年 4 月 23 日至 27 日在巴西里约热内卢举行。

随着首轮分数的公布,有第三方机构开始对 ICLR 2026 的审稿意见进行系统性统计,其中发现了大量 AI 审稿的现象。

在对 75800 篇论文的审稿意见统计中,竟然有 21% 完全由 AI 生成、4% 重度由 AI 编辑、9% 中度由 AI 编辑、22% 轻度由 AI 编辑,完全由人类(审稿人)撰写的仅占 43%



图源:X@ Graham Neubig

并且还呈现出一些趋势,包括AI 审稿意见篇幅更长、AI 审稿更可能给出高分



这项统计是由潘格拉姆实验室(Pangram Labs)完成的,这是一家专门检测 AI 生成(自动撰写或由大语言模型生成文字内容)的科技公司。此次,该机构对 ICLR 2026 投稿人和审稿人使用 AI 的情况进行了详尽的分析。



图源:X@ Pangram Labs 首席执行官 Max Spero

为了处理每篇论文,Pangram Labs 下载了 PDF,并使用 Mistral-OCR 解析其中的文本内容。这样可以去除预印本中的行号,得到较为干净的文本用于分析。他们针对所有文档运行了 Pangram 的生产模型,其在底层使用滑动窗口算法来估计 AI 使用的程度。

虽然许多文档检测到 AI 使用程度在 0% 到 10% 之间,但这些大多是因为论文中包含了作为研究内容的 LLM 输出示例,而不是在论文主体写作中使用了 AI。因此这一类全部被归为「完全由人类撰写」。



投稿论文的 AI 使用程度以及平均得分划分。

对于投稿论文,最终发现有 39% 以某种方式使用了 AI 作为写作助手。但有趣的是,论文中的 AI 使用程度与较低的评分呈相关性。其中,199 篇被 Pangram Labs 标记为「90–100%」AI 内容的投稿,它们的平均得分竟然只有 2.9 分。



对于审稿意见,由于评审文本很短,因此无法依赖滑动窗口来区分「AI 辅助」与「AI 生成」。因此,Pangram Labs 使用了EditLens—— 一个全新模型,旨在量化一段文本中 AI 辅助的程度



审稿意见中 AI 使用程度的预测、评分以及置信度。

结果发现 21% 的审稿意见被 EditLens 标记为完全由 AI 生成。并且,完全由 AI 生成的评审平均得分高出 0.3 分,长度也比完全由人类撰写的评审长了 26%



完全由 AI 生成的审稿意见示例如下:



对于有人询问的AI 评审的「置信度」问题,Pangram Labs 发现:完全由 AI 生成的评审比人类或 AI 辅助撰写的评审更倾向于给出置信度为 3 的评价。不过,这个差异幅度较小,因此仍需谨慎解读。



另外,为了验证所用模型的准确性(假阳性率),Pangram Labs 使用 ICLR 2022 的审稿意见运行了 EditLens,结果发现:轻度 AI 编辑的假阳性率为千分之一,中度 AI 编辑的假阳性率为五千分之一,重度 AI 编辑的假阳性率为万分之一,而完全由 AI 生成的未出现任何假阳性



评论区有审稿人现身说法,表示自己评审的一篇论文在收到另外两个低分评审时被打了回去,而这两个评审正好被标记为完全由 AI 生成。



官方回应来了

就在今天早上,ICLR 2026 发布了一则官方回应,表示「我们已经注意到低质量的评审以及由大语言模型生成的评审,目前正在讨论应采取的适当措施。就目前而言,收到质量非常差或由 LLM 生成评审的作者,应将其标注并反馈给所在领域主席(AC)。我们感谢社区在报告这些问题上的努力!」



对于使用 AI 的审稿人,有人给出了处理建议:移除不良评审,并自动使这些不良审稿人被认定为「未履行评审职责」,随后自动拒绝他们提交的论文。



评论区有没有向本届 ICLR 投稿的作者,可以参考 Pangram Labs 的统计结果,查看自己论文的 AI 审稿情况。

统计链接:https://iclr.pangram.com/submissions

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
海航杭州飞北京航班降落时复飞,乘客称遇大风飞机一直颠簸,有小孩哭还有人呕吐,航司回应

海航杭州飞北京航班降落时复飞,乘客称遇大风飞机一直颠簸,有小孩哭还有人呕吐,航司回应

极目新闻
2025-11-17 14:58:37
荒诞!雷军再遭小米产品反噬:40米潜水手表,小字免责又引火烧身

荒诞!雷军再遭小米产品反噬:40米潜水手表,小字免责又引火烧身

娜乌和西卡
2025-11-17 16:22:27
刚刚!杨兰兰澳洲案惊天逆转! 开庭后律师一句话让全场哗然! 所有人都难以置信,不认!

刚刚!杨兰兰澳洲案惊天逆转! 开庭后律师一句话让全场哗然! 所有人都难以置信,不认!

澳洲红领巾
2025-11-17 11:27:48
雷军公开喊冤!网友:“自杀式”公关...

雷军公开喊冤!网友:“自杀式”公关...

广告创意
2025-11-17 17:28:44
“70后”户外网红博主坠崖身亡,遗体被无人机运下山,出事两天前还在更新登山视频

“70后”户外网红博主坠崖身亡,遗体被无人机运下山,出事两天前还在更新登山视频

极目新闻
2025-11-17 18:38:23
又走了一家外企

又走了一家外企

曹多鱼的财经世界
2025-11-17 15:03:31
刘强东:京东正式推出京东外卖独立APP

刘强东:京东正式推出京东外卖独立APP

蓝鲸新闻
2025-11-17 19:04:03
小孩姐再夺一冠!全运会女子400米个人混合泳:于子迪斩获第3金

小孩姐再夺一冠!全运会女子400米个人混合泳:于子迪斩获第3金

全景体育V
2025-11-17 20:30:15
16人被查,17人被处分

16人被查,17人被处分

大象新闻
2025-11-17 20:42:08
G联赛:杨瀚森21+9+3+3帽连中两记续命三分 混音惜败吞首败

G联赛:杨瀚森21+9+3+3帽连中两记续命三分 混音惜败吞首败

醉卧浮生
2025-11-17 11:23:37
中方反制开始,高市支持率不降反升,近半数民众赞成武力介入台海

中方反制开始,高市支持率不降反升,近半数民众赞成武力介入台海

时时有聊
2025-11-17 07:32:57
撑不住了?日方宣布:高市早苗在反省,今后应该不会有类似发言

撑不住了?日方宣布:高市早苗在反省,今后应该不会有类似发言

烽火观天下
2025-11-17 14:57:24
里子面子都没了!邹市明赔光两亿后,冉莹颖亲手撕碎他最后的体面

里子面子都没了!邹市明赔光两亿后,冉莹颖亲手撕碎他最后的体面

赶鸭子上架
2025-11-14 15:48:42
孟加拉前总理哈西娜被判处死刑

孟加拉前总理哈西娜被判处死刑

寰宇大观察
2025-11-17 16:55:31
开发商伪造公证书变卖房主34套房,当地房管局:无能力核实真假

开发商伪造公证书变卖房主34套房,当地房管局:无能力核实真假

新京报
2025-11-17 19:43:32
广东一中学原校长,被查

广东一中学原校长,被查

鲁中晨报
2025-11-17 19:27:03
“都说了北京有海吧!”颐和园昆明湖水面被大风吹出“海浪”,网友:豆汁开锅了吗?

“都说了北京有海吧!”颐和园昆明湖水面被大风吹出“海浪”,网友:豆汁开锅了吗?

潇湘晨报
2025-11-17 16:11:11
父亲辞职给多动症儿子办休学,从湖南徒步1千公里到山东:他发现自己原来也能这么厉害

父亲辞职给多动症儿子办休学,从湖南徒步1千公里到山东:他发现自己原来也能这么厉害

潇湘晨报
2025-11-17 16:43:15
全运游泳收官!诞生5大赢家,2人失意,2人成未来希望,一项没落

全运游泳收官!诞生5大赢家,2人失意,2人成未来希望,一项没落

篮球圈里的那些事
2025-11-17 21:01:57
血迹太空可见,苏丹这场大屠杀何以发生?

血迹太空可见,苏丹这场大屠杀何以发生?

新京报
2025-11-17 13:13:52
2025-11-17 22:31:00
机器之心Pro incentive-icons
机器之心Pro
专业的人工智能媒体
11737文章数 142506关注度
往期回顾 全部

科技要闻

有了通义和夸克,阿里为何再推千问App?

头条要闻

40多万宝马跑1年多四条轮胎均现龟裂 4S店拒免费更换

头条要闻

40多万宝马跑1年多四条轮胎均现龟裂 4S店拒免费更换

体育要闻

当家球星受伤后,球迷乐翻了天?

娱乐要闻

金鸡奖是“照妖镜”,揭露人情冷暖?

财经要闻

高市早苗的算计,将让日本割肉5000亿

汽车要闻

新增CDC后变化大吗? 试驾特斯拉model Y L

态度原创

教育
游戏
亲子
家居
时尚

教育要闻

市重率57%!青浦兰生首届毕业生去向!

11月手游更新速递:《逆水寒》搜打撤玩法、《明日方舟》年度庆典

亲子要闻

孩子奇怪行为的背后,往往隐藏着秘密!

家居要闻

回廊通道 强化空间秩序

今年冬天最火的穿法:夹克+裤子,时髦又减龄!

无障碍浏览 进入关怀版