网易首页 > 网易号 > 正文 申请入驻

学术评判中,“AI考官”能被委以重任吗

0
分享至

“AI考官”能评判学术背后的思想重量吗?一项大规模研究,将当前最先进的生成式AI推上了学术评判的席位。

英国剑桥大学领衔的研究团队让Claude、ChatGPT等前沿模型,为来自英国三所大学考试和考核中的761篇本科论文逐一打分。结果显示,AI给出的评分与专家评审授予的学位等级仅仅有约半数相符。更为严峻的是,这些系统在识别优秀的学术成果和薄弱的作业时屡屡失准,暴露出其对语言形式过度敏感、对学术实质把握不足的缺陷。

这份新近发布的报告警示,尽管AI可以在一些阅卷流程中充当辅助工具,但若将其推向前台独立裁断,不仅可能抹杀学生的个性才华,更将动摇高等教育赖以维系的信任根基。

评分模式“掐头去尾”

这项名为OpRaise的研究由剑桥大学心理学家德博拉·塔尔米博士主持,联合曼彻斯特城市大学、诺丁汉大学共同完成。研究团队选取了2022年至2025年间提交的761篇真实本科论文,涵盖50个模块、87项不同作业,考核形式包括课程作业、开卷居家考试与监考考试。

接受测试的三种前沿大语言模型分别为Anthropic的Claude Opus4.6、OpenAI的GPT-5.4以及谷歌的Gemini 3 Flash。研究团队系统性地从评分标准具体性、校准干预和评分策略三个维度调整指令,甚至为模型提供了完整的评分标准与预期分数分布,并要求其在给分前逐项解释评判依据。即便如此,AI的评分准确率仍徘徊在35%至65%之间。

在三所不同的大学里,AI都表现出明显的“中心倾向偏差”。它们倾向于给所有作业打上安全的中等分数,在50至60分的区间,与人类评分最为接近。一篇被人类专家评为75分(一等学位水平)的优秀论文,AI平均会压低几分;而一篇被评定为50分的薄弱作品,AI反而会慷慨地拔高几分,呈现“掐头去尾”的评分模式。

更注重形式而非“内涵”

人类阅卷,要基于学术推理和学科洞察再作出判断,但AI的评分本质上依赖统计预测。此次所有被测模型,无一例外地对语言特征表现出过度敏感:文章篇幅更长、词汇范围更广、句子结构更复杂,往往就能获得更高分数。至于论证是否严谨、证据是否充分、批判性思维是否到位,则并非其关注核心。换言之,AI更容易被“漂亮的外表”迷惑,很难穿透文字去掂量学术思想的重量。

这种形式重于内容的倾向,带来了同质化风险。研究团队在不同时间用同一篇论文反复测试,AI每次给出的分数几乎纹丝不动。表面上看,这似乎是“一致性高”的优点,实则暴露了这些AI在共享同一种机械逻辑:它们并非在“理解”论文,而是在匹配语言模式。

而当所有模型都呈现相同的评分模式时,学生的个性表达、独特的论证路径、非常规但富有创见的思考,反而可能被忽略。这种偏见的后果,就导致上文所说的,AI在最重要的评估决策之处,准确率最低。

在评语反馈环节,同样存在局限。AI生成的评语篇幅通常是人类的3至8倍,团队于是将AI评语压缩到与人类评语同等长度后,再交由教职工和学生辨别作者身份,结果众人竟难以区分。然而一旦揭晓哪段话出自AI之手,参与者对AI评语的认可度便明显下降。这说明,教师与教师之间、教师与学生之间,那种基于专业默契和学科共同体的理解,仍是AI无法取代的。

人类考官无法被替代

面对日益繁重的阅卷压力,不少高校将AI视为缓解教职工负担的潜在方案。塔尔米博士坦言,大学正承受着削减工作量、提高效率、满足学生期望的多重压力,一些机构已开始考虑让AI承担评估职责。机器或许确实能分担部分劳动密集型的阅卷工作,让教师腾出更多时间直接指导学生。但这份题为《AI大学评估中的应用:评估自动评分的机遇与风险》的报告强调,最终成绩必须始终由人类裁定,AI至多只能充当“第二双眼睛”,用于错误检测、一致性检查,或是标记出AI评分与人工评分差异显著的作业,提请人类重点复核。

学术评估的意义,远不止于技术层面的打分。塔尔米博士指出,评估是构建教育意义的过程,它让学生感到被重视,维护学术标准,维系师生之间的信任。

曼彻斯特城市大学的报告合著者雅埃尔·本恩博士补充道,许多学生明确表示,若得知作业由AI打分,会产生强烈的被欺骗感;教职员工也认为,过度依赖机器可能侵蚀到专业判断,并“抽走”了高等教育作为核心的人性化。师生之间围绕评分与反馈形成的默契与期待,本质上是一种“社会契约”,它的存续有赖于人对人的认可与回应。

这份报告并没有否定AI在教育领域的价值,而是为其划定了清晰的边界:AI绝不能取代“考官席”上的那双受过专业训练的眼睛。在学术质量的裁断场,人类的推理、经验与责任感,至今仍是无法被算法替代的最后防线。

(科技日报)

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
19岁松岛辉空,正式公布退役计划

19岁松岛辉空,正式公布退役计划

最爱乒乓球
2026-08-14 01:37:38
大病最危险信号,不是消瘦,是吃饭频繁出现5个表现,别不当回事

大病最危险信号,不是消瘦,是吃饭频繁出现5个表现,别不当回事

医学原创故事会
2026-08-12 18:14:17
受权发布|中华人民共和国国务院令  第843号

受权发布|中华人民共和国国务院令  第843号

新华社
2026-08-13 17:01:03
关晓彤事件升级:涉骗1807万,更多黑料曝光牵连鹿晗

关晓彤事件升级:涉骗1807万,更多黑料曝光牵连鹿晗

明天后天大后天
2026-08-12 15:34:43
泪目!台风天,女外卖员半路把1岁娃托给上海一超市!店主:孩子浑身湿透颤抖……你送完再来接!

泪目!台风天,女外卖员半路把1岁娃托给上海一超市!店主:孩子浑身湿透颤抖……你送完再来接!

环球网资讯
2026-08-13 09:12:17
5年没发帖的雷霆队亚历山大,向拉塞尔·威斯布鲁克送上退役祝福

5年没发帖的雷霆队亚历山大,向拉塞尔·威斯布鲁克送上退役祝福

好火子
2026-08-14 05:45:29
财经大V:80%的男人一个月赚不到7000元,如果你税后7000元,不管男女,你可能已经胜过90%的人,评论区一片认同

财经大V:80%的男人一个月赚不到7000元,如果你税后7000元,不管男女,你可能已经胜过90%的人,评论区一片认同

谭谈社会
2026-08-11 20:56:50
A股:股民要抓紧坐稳了,大资金在表演!周五将会出现强烈的分化

A股:股民要抓紧坐稳了,大资金在表演!周五将会出现强烈的分化

虎哥闲聊
2026-08-14 00:00:05
中国证监会发布讣告:马忠智同志(副部长级)逝世

中国证监会发布讣告:马忠智同志(副部长级)逝世

读创
2026-08-13 22:06:09
公海猎杀令成真?英军悍然突袭俄油轮,普京下令太平洋对等反击

公海猎杀令成真?英军悍然突袭俄油轮,普京下令太平洋对等反击

观锐器
2026-08-13 19:05:37
困扰数学圈22年的难题,居然被协和实习医生解决了?

困扰数学圈22年的难题,居然被协和实习医生解决了?

新智元
2026-08-13 11:49:08
首日飙破2亿,口碑冲影史第一,和周星驰第二次交手,沈腾又赢了

首日飙破2亿,口碑冲影史第一,和周星驰第二次交手,沈腾又赢了

靠谱电影君
2026-08-11 17:19:21
A股:股民要准备好下车,主力不演了!周五将迎来更大的暴风雨?

A股:股民要准备好下车,主力不演了!周五将迎来更大的暴风雨?

云鹏叙事
2026-08-14 00:00:08
蒙古快扛不住了,越南也不行了?

蒙古快扛不住了,越南也不行了?

果妈聊娱乐
2026-08-13 12:42:11
武汉姑娘暑假到象山实习,在宁波火车站遭遇“黑车”,全程75分钟82公里被收442元

武汉姑娘暑假到象山实习,在宁波火车站遭遇“黑车”,全程75分钟82公里被收442元

黄河新闻网吕梁
2026-08-13 16:07:48
高级感碎一地!百花奖颁奖典礼上,引导人员挂着大号姓名牌,引发争议

高级感碎一地!百花奖颁奖典礼上,引导人员挂着大号姓名牌,引发争议

火山詩话
2026-08-12 15:43:13
上海一公司员工台风天怕迟到请假1小时,被罚1500元,HR批假同受牵连!

上海一公司员工台风天怕迟到请假1小时,被罚1500元,HR批假同受牵连!

上观新闻
2026-08-13 17:22:35
姆巴佩度假秀恩爱被嘲不务正业,欧冠金球真不重要了?看懂他凌晨四点加练才知多可怕

姆巴佩度假秀恩爱被嘲不务正业,欧冠金球真不重要了?看懂他凌晨四点加练才知多可怕

草莓解说体育
2026-08-08 11:29:46
中方不救,日本惨败!

中方不救,日本惨败!

戎评
2026-08-13 14:10:13
心理学:一个家庭长期没饭局,不串门、不社交,就已经说明了两个现实,很准

心理学:一个家庭长期没饭局,不串门、不社交,就已经说明了两个现实,很准

心理观察局
2026-07-02 06:05:10
2026-08-14 06:16:49
齐鲁壹点 incentive-icons
齐鲁壹点
找记者,上壹点!
674716文章数 83558关注度
往期回顾 全部

科技要闻

一切皆插件!DeepSeek Harness正式发布

头条要闻

冉莹颖被指称“输了换老公有保险”邹市明深夜回应

头条要闻

冉莹颖被指称“输了换老公有保险”邹市明深夜回应

体育要闻

负债十几亿的联赛,还在疯狂买球星

娱乐要闻

篡改红歌已立案,郭德纲大祸临头

财经要闻

可治疗癌症?神话破灭的片仔癀 陷入争议

汽车要闻

全新红旗H7到底新在哪儿?

态度原创

房产
艺术
时尚
手机
教育

房产要闻

投资暴跌90%!文昌楼市,正在停摆!

艺术要闻

顶级的大片

HYROX赛场上的美照怎么拍出来的?

手机要闻

荣耀Robot Phone成了,Magic9要来了

教育要闻

8月30日前完成!山东综评价系统填写教程!

无障碍浏览 进入关怀版