网易首页 > 网易号 > 正文 申请入驻

四篇撤稿论文:AI 的判断和期刊最终处置 4/4 一致

0
分享至

先说这个实验是干什么用的。

它不是为了证明"我很准"。它是为了证明我没作弊。

我知道这四篇论文都撤稿了。如果我就这么拿去评分,评出低分,说明不了任何问题——我可能只是把权重往"让撤稿的论文低分"的方向调了。哪怕我不是故意的,我读过那些撤稿公告,判断已经不干净了。

所以我把"撤稿公告"这条信息,从证据里删掉了。撤稿声明、期刊编辑的处置说明、后续的复现失败报道,全部移除。

它不知道这篇论文后来怎么样了,只能看论文本身。

重跑的结果:四篇的判断方向,与期刊最终处置4/4 一致。

(说明一点:我没有写"预测了撤稿"。准确的说法是"在屏蔽结论的条件下,给出的判断与期刊最终处置一致"。这两句话差别很大——"预测"暗示能预知未来,"一致"只是描述两个已发生事实之间的关系。)

先说一个我没想到的数字

四篇论文正常评分的结构强度是这样的:

1.00 / 0.913 / 0.913 / 0.863

(分数越高代表结构越稳。1.00 是最低分,那篇的结构问题最外露。)

然后我做了一件事——把证据池里所有跟"撤稿"有关的信息全部移除,同一套维度、同一套规则,重跑。

三篇的分数变化不大。原因不难理解:它们的结构问题,在论文本身就足够显眼。不需要撤稿公告来提示,读文本就能看出来。

但有一篇,从 0.913 掉到了 0.263。

这个落差,是今天最值得讲的事情。

0.913 里有一部分分,不是它的

必须先说清楚一件事,否则这个数字很容易被误读成"我的方法不稳定"。

0.913 掉到 0.263,不是因为方法坏了,是因为方法正常工作了。

一篇论文的 0.913 里,有一部分分数是"撤稿公告"这个信息贡献的。评分规则里没有一条写着"撤稿就扣分",但只要"这篇已被撤稿"进入上下文,判断就不再是纯粹基于结构的了。

这不算作弊,这算信息污染。

而把这条信息拿掉之后,剩下的0.263,才是这篇论文靠自己的结构挣来的分。

这意味着什么?

意味着这篇论文的问题,本来在文本里就能看出来。

它当年不是"看不出来",是"没人这么看"。

这句话我想展开讲一下,因为它是整个实验里我认为最有价值的部分。

它当年的问题,为什么没人看出来

一篇论文从发表走到撤稿,通常要经过很多年:有人质疑,有人尝试复现,复现失败,争议扩大,期刊介入调查,最后撤稿。

这说明它的结论有问题,是很久之后才被确认的。

但这不等于"它的结构问题很久之后才出现"。

结构问题在论文发表的那一刻,就已经在文本里了。它的证据链断在哪里、它最核心的主张靠几条证据撑着、它的图和正文对不对得上——这些东西,投稿那天就定下来了。

当年没有人去看这一层,不是因为这一层藏得深,是因为所有人都在读别的层:读结论、读意义、读它能带来什么。

一个惊人的结论发表出来,所有人的注意力都在"它说了什么",没人去看"它怎么说的"。

这就是"没人这么看"的意思。

而这套方法要做的,就是把人从第一层拉到第二层。

我到底在评什么(说清楚,免得被误读)

这里有一个关键区别,必须讲明:

我评的不是"这篇论文的结论对不对"。

结论对不对,有时候要几十年才能定。有些论文的结论至今还有争议,撤稿也不等于结论一定错——有些撤稿是因为数据问题、图片问题、程序问题,不一定是那个科学假设本身错了。

我评的是:这篇论文的论证结构,能不能撑住它自己给出的结论。

这个区别很重要。因为它决定了这套方法不需要等结果。

七个维度,全部来自文本自身:

维度

在看什么

证据链完整性

从主张到证据,中间有没有断环

关键结论的证据强度

最核心那个主张,靠几条独立证据撑着

可复现性线索

方法描述够不够别人重做一遍

数据与图表自洽

正文数、图数、附录数,对不对得上

引用生态

引用谁、被谁引用、什么时候

概念稳定性

同一个词前后含义有没有漂移

异常信号密度

图像重复、数据过度平滑、统计口径跳变

这七项,没有一项需要知道"这篇最后撤稿了"。

权重:我提前把这个问题堵了

到这一步,一定有人会问:"你是不是调了权重,才让结果好看的?"

这个质疑很合理,我提前测了。

核心维度的权重取三组:0.30 / 0.40 / 0.50,各跑一遍。

结果:四篇论文的排序,三组权重下完全不变。

这件事的意义比分数本身更大。它说明:排序结果是由证据结构本身决定的,不是由某组参数决定的。

反过来,如果换个权重排序就变了,那这个方法就只是一个能调出任意结果的玩具。

一个能调出你想要结果的评分方法,等于没有评分方法。

另一类案例:当时还没定论的

上面四篇是已经撤稿的论文。还有一类更难处理的:当时尚无定论的争议事件。

2023 年的室温超导事件(LK-99)就是这一类。当时的情况是:一个惊人的主张出现,有团队声称复现成功,随后大量复现失败。当时没有人知道最终会怎么样。

我的处理方式不是"下判断"。

我把这件事拆成了 20 个证据项,每一项都附上公开可查的链接。

我给出的是一份清单:这 20 条公开证据分别是什么、各来自哪里、指向什么。

20 条,每条一个 URL。任何人都可以自己点开,一条条看,自己得出结论。

这就是"可复算"落到案例层面的样子——我不要你信我的判断,我把判断的全部输入交给你。

这套东西,你明天就能用

讲到这里有人会觉得"这是科研圈的事"。

其实不是。这套"读结构不读结论"的方法,可以原样搬到任何一份论证性材料上。

举个你明天就会遇到的场景。

有人给你一份报告,结论是"这个行业三年内会翻倍"。你的第一反应通常是:这个结论有没有道理?

换成结构视角,你该问的是:

-它的核心主张,靠几条证据撑着?(如果全篇最重要的结论只有一条证据,这里就值得停一下) -从证据到结论,中间有没有断环?(有没有从 A 直接跳到 C,中间缺一环) -它引用的数据,跟它正文的说法对得上吗?(这是最容易查的一项) -同一个词,在前面和在后面,是一个意思吗?(很多材料靠偷换概念推进)

这四个问题,不需要你是这个行业的专家。

它们只需要你做一件事:先不看结论,先看它是怎么走到结论的。

一句可以带走的话

回到那个数字:0.913 → 0.263。

它想说的是:

一篇论文的结论,可能很多年后才知道对不对。但它的论证结构稳不稳,发表那天就能看。问题不在"看不出来",在"没人这么看"。

下次你看到一条惊人的结论——不管它来自论文、研报,还是别的地方——先把结论盖住,看它怎么论证的。

它撑不住,你现在就能知道。

*本文引用的均为公开撤稿事件与期刊公开发布的处置结果,不评价任何研究者个人。文中提及的案例不构成任何投资建议,不评价任何主体。所有评分数据为内部实验记录,方法可复算。*

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
华人科学家张锋祝贺导师获诺奖,表示有幸曾师从三位新晋诺奖得主

华人科学家张锋祝贺导师获诺奖,表示有幸曾师从三位新晋诺奖得主

现代快报
2026-10-05 22:34:18
中科院最新发现:咖啡豆含6种降糖新成分,效果超临床药3倍

中科院最新发现:咖啡豆含6种降糖新成分,效果超临床药3倍

思思夜话
2026-10-05 13:42:19
巴萨金童彻底陨落,22岁断崖下滑

巴萨金童彻底陨落,22岁断崖下滑

看我说体育
2026-09-28 08:19:56
2-0领先被拖入抢五!纵歌曼爆冷世排22蹲地庆祝 决胜局7-9逆转太险

2-0领先被拖入抢五!纵歌曼爆冷世排22蹲地庆祝 决胜局7-9逆转太险

颜小白的篮球梦
2026-10-06 12:28:35
全市场:托纳利成意大利中场核心,巴雷拉位置不稳

全市场:托纳利成意大利中场核心,巴雷拉位置不稳

懂球帝
2026-10-06 19:18:26
小泉进次郎:感到强烈愤慨

小泉进次郎:感到强烈愤慨

极目新闻
2026-10-04 13:24:31
在南极千米冰层之下捕捉“宇宙幽灵粒子”!官方详解为何今年物理学诺奖颁给哈尔岑

在南极千米冰层之下捕捉“宇宙幽灵粒子”!官方详解为何今年物理学诺奖颁给哈尔岑

澎湃新闻
2026-10-06 21:44:04
拔萝卜带泥!蔡康永“祸起萧墙”,原来他和刘嘉玲处境一样

拔萝卜带泥!蔡康永“祸起萧墙”,原来他和刘嘉玲处境一样

仙气美少女
2026-10-06 13:08:07
队报:罗萨里奥竖起30米球衣致敬梅西

队报:罗萨里奥竖起30米球衣致敬梅西

懂球帝
2026-10-06 21:57:32
民政局离婚人数暴涨,暴露一个现实: 现在年轻人不结婚, 其实怪父母

民政局离婚人数暴涨,暴露一个现实: 现在年轻人不结婚, 其实怪父母

兴趣知识
2026-10-07 01:00:11
2026年这5个行业,竟已发不出工资!形势真的很严峻了

2026年这5个行业,竟已发不出工资!形势真的很严峻了

细说职场
2026-04-26 16:52:27
英航一客机7分钟急坠8230米

英航一客机7分钟急坠8230米

财联社
2026-10-06 01:13:04
巴黎街头现中国麻辣烫门店,人均排队半个小时,章若楠曾直播种草,中国顾客:一份大约150元,味道和国内差不多

巴黎街头现中国麻辣烫门店,人均排队半个小时,章若楠曾直播种草,中国顾客:一份大约150元,味道和国内差不多

都市快报橙柿互动
2026-10-06 00:36:17
除了喝酒,刘欢还有一个生活习惯,让他从 104 斤胖到快 200 斤!

除了喝酒,刘欢还有一个生活习惯,让他从 104 斤胖到快 200 斤!

荆楚寰宇文枢
2026-10-05 23:34:48
欧美逼人民币升值,央妈居然真升了。

欧美逼人民币升值,央妈居然真升了。

流苏晚晴
2026-10-06 19:33:56
多人运动照片疯传!出境参加聚众淫乱活动,回国会被查吗?

多人运动照片疯传!出境参加聚众淫乱活动,回国会被查吗?

北京郑律师
2026-10-05 13:28:27
家要败,屋先知,老祖宗醒示:只需这3件小事,便可守住家中灵气

家要败,屋先知,老祖宗醒示:只需这3件小事,便可守住家中灵气

古怪奇谈录
2026-03-24 10:14:16
央视直播10月7日中国大满贯,梁靖崑对郭冠宏,孙颖莎战帕拉南

央视直播10月7日中国大满贯,梁靖崑对郭冠宏,孙颖莎战帕拉南

乒乓球球
2026-10-06 22:54:32
歼-16黄岩岛切进菲机尾流,马尼拉抗议,北京严正声明你非法闯入

歼-16黄岩岛切进菲机尾流,马尼拉抗议,北京严正声明你非法闯入

止戈军是我
2026-10-06 08:49:03
最伤身的“饮料”公布,停止饮用,很多人还当成宝,天天喝!

最伤身的“饮料”公布,停止饮用,很多人还当成宝,天天喝!

健康科普365
2026-08-29 20:40:04
2026-10-07 02:27:00
户外阿毽
户外阿毽
硬核户外的使徒行者! 开车山路狂飙,古溶洞探秘,航拍大好河山
99文章数 3760关注度
往期回顾 全部

科技要闻

物理学奖揭晓!一位天体物理科学家独享

头条要闻

婚宴14道主菜上错7道 新郎父亲:亲友说菜太差 没面子

头条要闻

婚宴14道主菜上错7道 新郎父亲:亲友说菜太差 没面子

体育要闻

30天30队·雄鹿:没有扬尼斯,重新试错吧

娱乐要闻

身家千万独居的王曼昱,私底下有多壕

财经要闻

杨植麟断腕:Kimi的至暗时刻与远征

汽车要闻

智能化再提升 2027款东风标致、东风雪铁龙新车更人性化了

态度原创

时尚
手机
亲子
数码
军事航空

秋天真的很适合穿印花裙,搭配这几款外套,优雅显瘦又高级

手机要闻

iOS 27.2 Beta 3新变化汇总,再次曝光新品线索!

亲子要闻

这哪里像是一个妈生的

数码要闻

穷人救星!AMD锐龙5 5600X3D暴降至1072元:成最便宜X3D处理器

军事要闻

也门政府军称收复红海港口城市穆哈

无障碍浏览 进入关怀版