网易首页 > 网易号 > 正文 申请入驻

离了大谱,21%的ICLR 2026审稿意见竟是AI生成的?官方回应来了

0
分享至



机器之心报道

机器之心编辑部

刚过去的这个周末,围绕 ICLR 2026 审稿意见中很多被标记为完全由 AI 生成的说法,引发了社区热烈讨论。本届会议将于 2026 年 4 月 23 日至 27 日在巴西里约热内卢举行。

随着首轮分数的公布,有第三方机构开始对 ICLR 2026 的审稿意见进行系统性统计,其中发现了大量 AI 审稿的现象。

在对 75800 篇论文的审稿意见统计中,竟然有 21% 完全由 AI 生成、4% 重度由 AI 编辑、9% 中度由 AI 编辑、22% 轻度由 AI 编辑,完全由人类(审稿人)撰写的仅占 43%



图源:X@ Graham Neubig

并且还呈现出一些趋势,包括AI 审稿意见篇幅更长、AI 审稿更可能给出高分



这项统计是由潘格拉姆实验室(Pangram Labs)完成的,这是一家专门检测 AI 生成(自动撰写或由大语言模型生成文字内容)的科技公司。此次,该机构对 ICLR 2026 投稿人和审稿人使用 AI 的情况进行了详尽的分析。



图源:X@ Pangram Labs 首席执行官 Max Spero

为了处理每篇论文,Pangram Labs 下载了 PDF,并使用 Mistral-OCR 解析其中的文本内容。这样可以去除预印本中的行号,得到较为干净的文本用于分析。他们针对所有文档运行了 Pangram 的生产模型,其在底层使用滑动窗口算法来估计 AI 使用的程度。

虽然许多文档检测到 AI 使用程度在 0% 到 10% 之间,但这些大多是因为论文中包含了作为研究内容的 LLM 输出示例,而不是在论文主体写作中使用了 AI。因此这一类全部被归为「完全由人类撰写」。



投稿论文的 AI 使用程度以及平均得分划分。

对于投稿论文,最终发现有 39% 以某种方式使用了 AI 作为写作助手。但有趣的是,论文中的 AI 使用程度与较低的评分呈相关性。其中,199 篇被 Pangram Labs 标记为「90–100%」AI 内容的投稿,它们的平均得分竟然只有 2.9 分。



对于审稿意见,由于评审文本很短,因此无法依赖滑动窗口来区分「AI 辅助」与「AI 生成」。因此,Pangram Labs 使用了EditLens—— 一个全新模型,旨在量化一段文本中 AI 辅助的程度



审稿意见中 AI 使用程度的预测、评分以及置信度。

结果发现 21% 的审稿意见被 EditLens 标记为完全由 AI 生成。并且,完全由 AI 生成的评审平均得分高出 0.3 分,长度也比完全由人类撰写的评审长了 26%



完全由 AI 生成的审稿意见示例如下:



对于有人询问的AI 评审的「置信度」问题,Pangram Labs 发现:完全由 AI 生成的评审比人类或 AI 辅助撰写的评审更倾向于给出置信度为 3 的评价。不过,这个差异幅度较小,因此仍需谨慎解读。



另外,为了验证所用模型的准确性(假阳性率),Pangram Labs 使用 ICLR 2022 的审稿意见运行了 EditLens,结果发现:轻度 AI 编辑的假阳性率为千分之一,中度 AI 编辑的假阳性率为五千分之一,重度 AI 编辑的假阳性率为万分之一,而完全由 AI 生成的未出现任何假阳性



评论区有审稿人现身说法,表示自己评审的一篇论文在收到另外两个低分评审时被打了回去,而这两个评审正好被标记为完全由 AI 生成。



官方回应来了

就在今天早上,ICLR 2026 发布了一则官方回应,表示「我们已经注意到低质量的评审以及由大语言模型生成的评审,目前正在讨论应采取的适当措施。就目前而言,收到质量非常差或由 LLM 生成评审的作者,应将其标注并反馈给所在领域主席(AC)。我们感谢社区在报告这些问题上的努力!」



对于使用 AI 的审稿人,有人给出了处理建议:移除不良评审,并自动使这些不良审稿人被认定为「未履行评审职责」,随后自动拒绝他们提交的论文。



评论区有没有向本届 ICLR 投稿的作者,可以参考 Pangram Labs 的统计结果,查看自己论文的 AI 审稿情况。

统计链接:https://iclr.pangram.com/submissions

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
中美谈完,中方深夜通告世界,不管特朗普怎么想,已立下2大规矩

中美谈完,中方深夜通告世界,不管特朗普怎么想,已立下2大规矩

健身狂人
2026-03-18 20:04:37
去年在杭州横空出世,瞬间火遍全网!有人“入职”后月入七八万,也有人只待了2天就走

去年在杭州横空出世,瞬间火遍全网!有人“入职”后月入七八万,也有人只待了2天就走

都市快报橙柿互动
2026-03-18 13:36:26
拉里贾尼遇刺,伊朗内部“能谈的人”更少了,美国“脱身”更难了?

拉里贾尼遇刺,伊朗内部“能谈的人”更少了,美国“脱身”更难了?

上观新闻
2026-03-18 23:01:06
以防长称“所有伊朗人都是打击目标”

以防长称“所有伊朗人都是打击目标”

财联社
2026-03-18 18:54:09
长津湖冻死冻伤3万人,多年后宋时轮才说出真相:不只是缺棉衣那么简单

长津湖冻死冻伤3万人,多年后宋时轮才说出真相:不只是缺棉衣那么简单

寄史言志
2026-03-17 23:25:17
伊朗:“彻底打击”地区所有美军基地和以军集结点!美军“福特号”航母撤离红海回基地维修,特朗普:霍尔木兹航运安全责任不应由美国承担

伊朗:“彻底打击”地区所有美军基地和以军集结点!美军“福特号”航母撤离红海回基地维修,特朗普:霍尔木兹航运安全责任不应由美国承担

每日经济新闻
2026-03-18 22:33:04
全球约一半肝癌在中国!再三提醒:家里的5种食物,尽快撤下餐桌

全球约一半肝癌在中国!再三提醒:家里的5种食物,尽快撤下餐桌

DrX说
2026-03-18 14:39:50
神奇的摩萨德——拉里贾尼之死的传奇细节

神奇的摩萨德——拉里贾尼之死的传奇细节

西楼饮月
2026-03-18 13:39:20
拉里贾尼遇害,德黑兰展开报复,伊朗总统:凶手必将受严惩

拉里贾尼遇害,德黑兰展开报复,伊朗总统:凶手必将受严惩

环球网资讯
2026-03-19 06:38:23
伊朗:拉里贾尼及其子、副手在首都女儿家中遇袭身亡,已为所有关键政府官员和军事指挥官预先指定了3至7名不等的替代人选

伊朗:拉里贾尼及其子、副手在首都女儿家中遇袭身亡,已为所有关键政府官员和军事指挥官预先指定了3至7名不等的替代人选

扬子晚报
2026-03-18 07:08:15
甘肃涵涵后续:好消息传来,有部门介入,父亲目的被扒,网友破防

甘肃涵涵后续:好消息传来,有部门介入,父亲目的被扒,网友破防

潮鹿逐梦
2026-03-18 14:57:53
伊朗最高领袖就拉里贾尼遇害发表声明:血债将很快得到清算

伊朗最高领袖就拉里贾尼遇害发表声明:血债将很快得到清算

界面新闻
2026-03-19 06:56:41
首例!伊朗法官被无人机送走:有些账,不是不报!

首例!伊朗法官被无人机送走:有些账,不是不报!

老马拉车莫少装
2026-03-18 21:53:58
教育大局已定:2026年初中考高中将迎来3大变化,家长要早作准备

教育大局已定:2026年初中考高中将迎来3大变化,家长要早作准备

夜深爱杂谈
2026-03-18 21:58:01
现货黄金跳水

现货黄金跳水

澎湃新闻
2026-03-18 23:01:02
油价将于3月23日24时进行调整:或重回“9元时代”,月底加一箱油或多花超100元

油价将于3月23日24时进行调整:或重回“9元时代”,月底加一箱油或多花超100元

极目新闻
2026-03-18 10:39:37
法国总统马克龙凌晨发文怒斥:我的士兵被打死了,这绝不能忍!

法国总统马克龙凌晨发文怒斥:我的士兵被打死了,这绝不能忍!

小涛叨叨
2026-03-19 02:56:48
硬刚!塞内加尔拒绝交回非洲杯冠军奖杯:6780万元奖金也别想拿回

硬刚!塞内加尔拒绝交回非洲杯冠军奖杯:6780万元奖金也别想拿回

风过乡
2026-03-18 21:11:25
G178次列车旅客已全部安全有序转移至救援动车组

G178次列车旅客已全部安全有序转移至救援动车组

新京报
2026-03-18 21:23:12
悲催!兰州一大龄剩女晒一个月最低消费清单,600元烟钱引发争议

悲催!兰州一大龄剩女晒一个月最低消费清单,600元烟钱引发争议

火山詩话
2026-03-18 06:28:49
2026-03-19 07:55:00
机器之心Pro incentive-icons
机器之心Pro
专业的人工智能媒体
12536文章数 142589关注度
往期回顾 全部

科技要闻

腾讯电话会:马化腾首谈“养虾”构想

头条要闻

专家:对伊朗而言不输就是胜利 德黑兰绝不能惧怕损失

头条要闻

专家:对伊朗而言不输就是胜利 德黑兰绝不能惧怕损失

体育要闻

守住底线的中国女足,下一步该怎么走?

娱乐要闻

姚晨侯雯元绯闻升级 双方否认称是谣言

财经要闻

楼市最大的"赌徒",正在批量抄底老破小

汽车要闻

价格10万级 四驱中级电混轿车银河星耀7来了

态度原创

本地
艺术
房产
手机
公开课

本地新闻

春色满城关不住|粉色浪漫已至,来宁波共赏樱花雨

艺术要闻

百年前欧洲美女老照片,惊艳到你了吗?快来看看!

房产要闻

大规模召回离职员工?碧桂园最新回应!

手机要闻

王腾谈手机行业现状:平衡成本与新品 建议开发手机版OpenCLAW

公开课

李玫瑾:为什么性格比能力更重要?

无障碍浏览 进入关怀版