网易首页 > 网易号 > 正文 申请入驻

离了大谱,21%的ICLR 2026审稿意见竟是AI生成的?官方回应来了

0
分享至

机器之心报道

机器之心编辑部

刚过去的这个周末,围绕 ICLR 2026 审稿意见中很多被标记为完全由 AI 生成的说法,引发了社区热烈讨论。本届会议将于 2026 年 4 月 23 日至 27 日在巴西里约热内卢举行。

随着首轮分数的公布,有第三方机构开始对 ICLR 2026 的审稿意见进行系统性统计,其中发现了大量 AI 审稿的现象。

在对 75800 篇论文的审稿意见统计中,竟然有 21% 完全由 AI 生成、4% 重度由 AI 编辑、9% 中度由 AI 编辑、22% 轻度由 AI 编辑,完全由人类(审稿人)撰写的仅占 43%

图源:X@ Graham Neubig

并且还呈现出一些趋势,包括AI 审稿意见篇幅更长、AI 审稿更可能给出高分

这项统计是由潘格拉姆实验室(Pangram Labs)完成的,这是一家专门检测 AI 生成(自动撰写或由大语言模型生成文字内容)的科技公司。此次,该机构对 ICLR 2026 投稿人和审稿人使用 AI 的情况进行了详尽的分析。

图源:X@ Pangram Labs 首席执行官 Max Spero

为了处理每篇论文,Pangram Labs 下载了 PDF,并使用 Mistral-OCR 解析其中的文本内容。这样可以去除预印本中的行号,得到较为干净的文本用于分析。他们针对所有文档运行了 Pangram 的生产模型,其在底层使用滑动窗口算法来估计 AI 使用的程度。

虽然许多文档检测到 AI 使用程度在 0% 到 10% 之间,但这些大多是因为论文中包含了作为研究内容的 LLM 输出示例,而不是在论文主体写作中使用了 AI。因此这一类全部被归为「完全由人类撰写」。

投稿论文的 AI 使用程度以及平均得分划分。

对于投稿论文,最终发现有 39% 以某种方式使用了 AI 作为写作助手。但有趣的是,论文中的 AI 使用程度与较低的评分呈相关性。其中,199 篇被 Pangram Labs 标记为「90–100%」AI 内容的投稿,它们的平均得分竟然只有 2.9 分。

对于审稿意见,由于评审文本很短,因此无法依赖滑动窗口来区分「AI 辅助」与「AI 生成」。因此,Pangram Labs 使用了EditLens—— 一个全新模型,旨在量化一段文本中 AI 辅助的程度

审稿意见中 AI 使用程度的预测、评分以及置信度。

结果发现 21% 的审稿意见被 EditLens 标记为完全由 AI 生成。并且,完全由 AI 生成的评审平均得分高出 0.3 分,长度也比完全由人类撰写的评审长了 26%

完全由 AI 生成的审稿意见示例如下:

对于有人询问的AI 评审的「置信度」问题,Pangram Labs 发现:完全由 AI 生成的评审比人类或 AI 辅助撰写的评审更倾向于给出置信度为 3 的评价。不过,这个差异幅度较小,因此仍需谨慎解读。

另外,为了验证所用模型的准确性(假阳性率),Pangram Labs 使用 ICLR 2022 的审稿意见运行了 EditLens,结果发现:轻度 AI 编辑的假阳性率为千分之一,中度 AI 编辑的假阳性率为五千分之一,重度 AI 编辑的假阳性率为万分之一,而完全由 AI 生成的未出现任何假阳性

评论区有审稿人现身说法,表示自己评审的一篇论文在收到另外两个低分评审时被打了回去,而这两个评审正好被标记为完全由 AI 生成。

官方回应来了

就在今天早上,ICLR 2026 发布了一则官方回应,表示「我们已经注意到低质量的评审以及由大语言模型生成的评审,目前正在讨论应采取的适当措施。就目前而言,收到质量非常差或由 LLM 生成评审的作者,应将其标注并反馈给所在领域主席(AC)。我们感谢社区在报告这些问题上的努力!」

对于使用 AI 的审稿人,有人给出了处理建议:移除不良评审,并自动使这些不良审稿人被认定为「未履行评审职责」,随后自动拒绝他们提交的论文。

评论区有没有向本届 ICLR 投稿的作者,可以参考 Pangram Labs 的统计结果,查看自己论文的 AI 审稿情况。

统计链接:https://iclr.pangram.com/submissions

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
人品差的人,开口闭口都是这3句话,尽量不要深交

人品差的人,开口闭口都是这3句话,尽量不要深交

金沛的国学笔记
2026-11-16 21:05:01
辽宁沈阳一校花太漂亮了 身高172 五官精致 美得让人移不开眼

辽宁沈阳一校花太漂亮了 身高172 五官精致 美得让人移不开眼

笔墨V
2026-11-17 00:43:33
越来越多物业不再催缴物业费,业内直言:不是心软了,是套路变了

越来越多物业不再催缴物业费,业内直言:不是心软了,是套路变了

史之铭
2026-11-16 01:51:29
黄金大跌,慌啥子嘛!!!

黄金大跌,慌啥子嘛!!!

杨子黄金
2026-11-16 07:52:25
14岁女孩为买手机,主动找两个19岁“大姐头”介绍客人发生关系,一周十多次获利3000元,法院判了

14岁女孩为买手机,主动找两个19岁“大姐头”介绍客人发生关系,一周十多次获利3000元,法院判了

一丝不苟的法律人
2026-10-21 11:16:40
比恒大更惊人,中国第二大民企轰然倒下,负债7500亿,创始人落网

比恒大更惊人,中国第二大民企轰然倒下,负债7500亿,创始人落网

趣文说娱
2026-11-12 04:55:18
《持械入宋》爆火,演员要集体失业了吗?

《持械入宋》爆火,演员要集体失业了吗?

二湘空间
2026-11-15 09:54:01
CCTV5直播!国足VS巴林首发11人预测:吴曦领衔 韩鹏飞坐镇 塞鸟回归 张玉宁冲锋

CCTV5直播!国足VS巴林首发11人预测:吴曦领衔 韩鹏飞坐镇 塞鸟回归 张玉宁冲锋

球场新视角1号
2026-11-16 19:16:22
从国家队退役仅7天,C罗官宣重大决定,他走上了另一条“新路”

从国家队退役仅7天,C罗官宣重大决定,他走上了另一条“新路”

乡野小珥
2026-11-16 05:23:00
中纪委重磅出手!严查这些歪风和腐败问题!有些人要瑟瑟发抖了!

中纪委重磅出手!严查这些歪风和腐败问题!有些人要瑟瑟发抖了!

职场资深秘书
2026-11-16 14:21:15
彩票出现断崖式暴跌,“2元中500万”为何没人信了?原因引人深思

彩票出现断崖式暴跌,“2元中500万”为何没人信了?原因引人深思

阿振观点
2026-08-21 05:38:20
约20万元,特斯拉新车官宣:预计12月正式交付

约20万元,特斯拉新车官宣:预计12月正式交付

高科技爱好者
2026-11-14 22:45:38
体制内高退休金还能维持多久?

体制内高退休金还能维持多久?

逍遥论经
2026-11-16 14:12:57
重磅:克里米亚大桥遇袭交通关闭!乌克兰攻击俄军舰

重磅:克里米亚大桥遇袭交通关闭!乌克兰攻击俄军舰

项鹏飞
2026-11-16 18:32:45
阿根廷之所以大老远把牛肉便宜卖到中国,是因为中国什么部位都要

阿根廷之所以大老远把牛肉便宜卖到中国,是因为中国什么部位都要

流苏晚晴
2026-09-15 12:17:39
4年8个月的俄乌战争:战前约50万俄精锐骨干基本被打光

4年8个月的俄乌战争:战前约50万俄精锐骨干基本被打光

高博新视野
2026-10-19 18:22:43
厨房里一个调料,导致中国人死亡率全球第一,专家:不能再这么吃

厨房里一个调料,导致中国人死亡率全球第一,专家:不能再这么吃

39疾病百科
2026-11-01 09:01:18
女警官资助宁夏山村女孩三年学费,26年后,女孩定居深圳成为工程师,欲寻警官报恩,“我发生翻天覆地的变化,这都离不开她的帮助”

女警官资助宁夏山村女孩三年学费,26年后,女孩定居深圳成为工程师,欲寻警官报恩,“我发生翻天覆地的变化,这都离不开她的帮助”

蓬勃新闻
2026-07-21 16:05:31
于东来再谈因涨租闭店:店一年能挣一亿肯定舍不得,但关了就关了,不要去跟不喜欢的人打交道

于东来再谈因涨租闭店:店一年能挣一亿肯定舍不得,但关了就关了,不要去跟不喜欢的人打交道

极目新闻
2026-11-16 19:37:47
刘忍,必须死!

刘忍,必须死!

李万卿
2026-10-29 14:52:25
2026-11-17 01:24:49
机器之心Pro incentive-icons
机器之心Pro
专业的人工智能媒体
14488文章数 142758关注度
往期回顾 全部

科技要闻

硅谷大佬组局,帮黄仁勋杀回来!

头条要闻

上任2个月尤尼斯在街头遭暗杀身亡 知情人:被以"斩首"

头条要闻

上任2个月尤尼斯在街头遭暗杀身亡 知情人:被以"斩首"

体育要闻

NBA开赛最大惊喜,是他们?

娱乐要闻

陈晓楠对话厉娜和许飞引全网热议

财经要闻

10万人逼宫英伟达,黄仁勋要复职了?

汽车要闻

更豪华更好开 问界新M8细节升级见真章

态度原创

本地
时尚
亲子
公开课
军事航空

本地新闻

乌兰察布:以前种土豆,现在种Token

自骂“烂人”的黄仁勋,冤不冤?

亲子要闻

宝宝气人但是聪明的4个行为

公开课

李玫瑾:为什么性格比能力更重要?

军事要闻

哈马斯拉法旅指挥官死于以军空袭

无障碍浏览 进入关怀版