网易首页 > 网易号 > 正文 申请入驻

离了大谱,21%的ICLR 2026审稿意见竟是AI生成的?官方回应来了

0
分享至



机器之心报道

机器之心编辑部

刚过去的这个周末,围绕 ICLR 2026 审稿意见中很多被标记为完全由 AI 生成的说法,引发了社区热烈讨论。本届会议将于 2026 年 4 月 23 日至 27 日在巴西里约热内卢举行。

随着首轮分数的公布,有第三方机构开始对 ICLR 2026 的审稿意见进行系统性统计,其中发现了大量 AI 审稿的现象。

在对 75800 篇论文的审稿意见统计中,竟然有 21% 完全由 AI 生成、4% 重度由 AI 编辑、9% 中度由 AI 编辑、22% 轻度由 AI 编辑,完全由人类(审稿人)撰写的仅占 43%



图源:X@ Graham Neubig

并且还呈现出一些趋势,包括AI 审稿意见篇幅更长、AI 审稿更可能给出高分



这项统计是由潘格拉姆实验室(Pangram Labs)完成的,这是一家专门检测 AI 生成(自动撰写或由大语言模型生成文字内容)的科技公司。此次,该机构对 ICLR 2026 投稿人和审稿人使用 AI 的情况进行了详尽的分析。



图源:X@ Pangram Labs 首席执行官 Max Spero

为了处理每篇论文,Pangram Labs 下载了 PDF,并使用 Mistral-OCR 解析其中的文本内容。这样可以去除预印本中的行号,得到较为干净的文本用于分析。他们针对所有文档运行了 Pangram 的生产模型,其在底层使用滑动窗口算法来估计 AI 使用的程度。

虽然许多文档检测到 AI 使用程度在 0% 到 10% 之间,但这些大多是因为论文中包含了作为研究内容的 LLM 输出示例,而不是在论文主体写作中使用了 AI。因此这一类全部被归为「完全由人类撰写」。



投稿论文的 AI 使用程度以及平均得分划分。

对于投稿论文,最终发现有 39% 以某种方式使用了 AI 作为写作助手。但有趣的是,论文中的 AI 使用程度与较低的评分呈相关性。其中,199 篇被 Pangram Labs 标记为「90–100%」AI 内容的投稿,它们的平均得分竟然只有 2.9 分。



对于审稿意见,由于评审文本很短,因此无法依赖滑动窗口来区分「AI 辅助」与「AI 生成」。因此,Pangram Labs 使用了EditLens—— 一个全新模型,旨在量化一段文本中 AI 辅助的程度



审稿意见中 AI 使用程度的预测、评分以及置信度。

结果发现 21% 的审稿意见被 EditLens 标记为完全由 AI 生成。并且,完全由 AI 生成的评审平均得分高出 0.3 分,长度也比完全由人类撰写的评审长了 26%



完全由 AI 生成的审稿意见示例如下:



对于有人询问的AI 评审的「置信度」问题,Pangram Labs 发现:完全由 AI 生成的评审比人类或 AI 辅助撰写的评审更倾向于给出置信度为 3 的评价。不过,这个差异幅度较小,因此仍需谨慎解读。



另外,为了验证所用模型的准确性(假阳性率),Pangram Labs 使用 ICLR 2022 的审稿意见运行了 EditLens,结果发现:轻度 AI 编辑的假阳性率为千分之一,中度 AI 编辑的假阳性率为五千分之一,重度 AI 编辑的假阳性率为万分之一,而完全由 AI 生成的未出现任何假阳性



评论区有审稿人现身说法,表示自己评审的一篇论文在收到另外两个低分评审时被打了回去,而这两个评审正好被标记为完全由 AI 生成。



官方回应来了

就在今天早上,ICLR 2026 发布了一则官方回应,表示「我们已经注意到低质量的评审以及由大语言模型生成的评审,目前正在讨论应采取的适当措施。就目前而言,收到质量非常差或由 LLM 生成评审的作者,应将其标注并反馈给所在领域主席(AC)。我们感谢社区在报告这些问题上的努力!」



对于使用 AI 的审稿人,有人给出了处理建议:移除不良评审,并自动使这些不良审稿人被认定为「未履行评审职责」,随后自动拒绝他们提交的论文。



评论区有没有向本届 ICLR 投稿的作者,可以参考 Pangram Labs 的统计结果,查看自己论文的 AI 审稿情况。

统计链接:https://iclr.pangram.com/submissions

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
玥儿开通账号关注了妈妈大S,评论区暖心到令人落泪

玥儿开通账号关注了妈妈大S,评论区暖心到令人落泪

素素娱乐
2026-05-10 20:36:58
张萌每一套都那么诱人

张萌每一套都那么诱人

乡野小珥
2026-04-30 15:18:35
张皓嘉三分绝杀,谁注意赵睿?下意识不防,赛后开心祝贺其绝杀!

张皓嘉三分绝杀,谁注意赵睿?下意识不防,赛后开心祝贺其绝杀!

篮球资讯达人
2026-05-10 00:14:53
1-0变0-1!国安亏大了:进球不仅不算,马宁还反判给海港1个点球

1-0变0-1!国安亏大了:进球不仅不算,马宁还反判给海港1个点球

足球大腕
2026-05-10 20:58:24
“不具名蓝委”出现,卢秀燕再添质疑,徐巧芯表态力挺郑丽文!

“不具名蓝委”出现,卢秀燕再添质疑,徐巧芯表态力挺郑丽文!

热点一网打尽
2026-05-10 15:14:10
知名演员吴艳杰,家中离世!

知名演员吴艳杰,家中离世!

无比
2026-05-10 20:37:06
拒绝再被消费!梅西首次公开评价C罗,真相让无数老球迷泪目了

拒绝再被消费!梅西首次公开评价C罗,真相让无数老球迷泪目了

无人倾听无人倾听
2026-05-09 16:28:35
云南一交管大队队长被举报在KTV违规饮酒与女子举止亲密,本人称喝的茶水,女子突然靠近我下意识推了她;官方:初步调查举报不实

云南一交管大队队长被举报在KTV违规饮酒与女子举止亲密,本人称喝的茶水,女子突然靠近我下意识推了她;官方:初步调查举报不实

大象新闻
2026-05-10 08:42:28
山东泰山1-2憾负大连,中场崩盘,王梓丞补时破门,冲甲形势严峻

山东泰山1-2憾负大连,中场崩盘,王梓丞补时破门,冲甲形势严峻

老周观体育
2026-05-09 23:22:04
最新发现:看似普通的“蚕豆”,对于脑梗患者是不可多得的宝贝

最新发现:看似普通的“蚕豆”,对于脑梗患者是不可多得的宝贝

健康之光
2026-05-08 19:50:06
韩国人对华好感度最新数据公布

韩国人对华好感度最新数据公布

扬子晚报
2026-05-10 15:52:55
山东男篮大调整!外援一个不留,高诗岩合同到期,陶汉林或退役

山东男篮大调整!外援一个不留,高诗岩合同到期,陶汉林或退役

体坛瞎白话
2026-05-10 08:02:04
002428,十倍股,磷化铟概念龙头爆发(附名单)

002428,十倍股,磷化铟概念龙头爆发(附名单)

数据宝
2026-05-10 08:13:14
我被女老板睡了3年,她却在年会现场宣布我是她女婿!

我被女老板睡了3年,她却在年会现场宣布我是她女婿!

游戏收藏指南
2026-05-10 13:56:22
伊朗深夜清理门户,两名内鬼被绞,身份曝光后中国也惊出一身冷汗

伊朗深夜清理门户,两名内鬼被绞,身份曝光后中国也惊出一身冷汗

达文西看世界
2026-05-09 14:03:46
又来,“伊朗这招太绝,中方会学,美国真没准备好”

又来,“伊朗这招太绝,中方会学,美国真没准备好”

观察者网
2026-05-08 10:14:07
21 岁徐悲鸿画的 “天价仙女”,被网友骂 “生无可恋”

21 岁徐悲鸿画的 “天价仙女”,被网友骂 “生无可恋”

中国艺术家
2026-05-08 05:26:53
买了台坦克300开了一年,算完账我沉默了:原来油门踩下去都是钱

买了台坦克300开了一年,算完账我沉默了:原来油门踩下去都是钱

音乐时光的娱乐
2026-05-08 20:01:40
闹大了!法国队赛前放狠话失败,F·勒布伦当场痛哭,哥哥情绪失控

闹大了!法国队赛前放狠话失败,F·勒布伦当场痛哭,哥哥情绪失控

郝小小看体育
2026-05-10 09:30:13
【中超】徐正源无缘开门红 铁人1比2不敌玉昆6连败

【中超】徐正源无缘开门红 铁人1比2不敌玉昆6连败

体坛周报
2026-05-10 21:05:10
2026-05-10 21:24:52
机器之心Pro incentive-icons
机器之心Pro
专业的人工智能媒体
12957文章数 142647关注度
往期回顾 全部

科技要闻

DeepSeek融资,改写所有人的估值

头条要闻

罕见一幕 韩国总统、国会议长、执政党党首同日飙泪

头条要闻

罕见一幕 韩国总统、国会议长、执政党党首同日飙泪

体育要闻

那个曾让詹姆斯抱头的兄弟,40岁从大学毕业了

娱乐要闻

大S女儿玥儿开通账号,用烟花缅怀母亲

财经要闻

白酒大逃杀

汽车要闻

轴距加长/智驾拉满 阿维塔07L定位大五座SUV

态度原创

本地
教育
数码
房产
公开课

本地新闻

用苏绣的方式,打开江西婺源

教育要闻

比考上985更稳的路径?这个国家战略新专业,毕业直通央企核心岗

数码要闻

微软Win11 Xbox模式实测:英伟达、AMD显卡游戏性能均获提升

房产要闻

低价甩卖!海口这个地标商业,无人接盘!

公开课

李玫瑾:为什么性格比能力更重要?

无障碍浏览 进入关怀版