网易首页 > 网易号 > 正文 申请入驻

新测试表明AI实际办公准确率不足25%,但进展比想象更快

0
分享至

IT之家 1 月 26 日消息,Digital Trends 24 日报道,一项由训练数据公司 Mercor 发布的研究报告指出,当前主流人工智能模型在处理实际办公室任务时表现不佳,最高准确率未超过 25%,研究表明 AI 在短期内难以替代人类知识工作者

该研究基于 Mercor 新推出的 APEX-Agents 基准进行测试,有别于传统上通过写诗和解数学题为主的 AI 评估方法,该基准测试直接采用律师、顾问和银行家的真实工作流,要求受试模型完成横跨多个信息来源的多步骤综合任务。

结果显示,即使是市场上明显处于领先地位的模型也无法达到 25% 的准确率,测试中成绩领先的 Gemini 3 Flash 和 GPT-5.2,其准确率也仅为 24% 和 23%,而其他大多数受试模型的成绩则不高于 20%。


为何 AI 会在“办公测试”中失败?Mercor 首席执行官 Brendan Foody 分析称,AI 失败的关键在于缺乏上下文处理能力。在真实办公场景中,任务往往需要整合分散资源,比如查看日程,翻阅即时通讯记录、阅读 PDF 文档和电子表格,而 AI 在跨源信息搜索与整理时容易混淆、出错,要么干脆放弃。这导致目前的 AI 在办公室里更像一个“不可靠的实习生”,而非成熟的专业人员

IT之家附 APEX-Agents 准确率测试结果如下(排名从高到低):

  • Gemini 3 Flash (High) - 24.0%
  • GPT-5.2 (High) - 23.0%
  • Claude Opus 4.5 (High) - 18.4%
  • Gemini 3 Pro (High) - 18.4%
  • GPT-5 (High) - 18.3%
  • Grok 4 - 15.2%
  • GPT-OSS-120B (High) - 4.7%
  • Kimi K2 Thinking - 4.0%

尽管表现有限,但 AI 的进步引人关注。Foody 指出,一年前同类测试的准确率仅为 5%-10%,如今已提升至 24%,AI 的学习速度远超预期。不过,研究也强调,在掌握多任务处理和上下文切换之前,AI 尚无法胜任复杂的知识工作。

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
苹果M5 MacBook Pro降至1699美元,96W适配器版直降320美元

苹果M5 MacBook Pro降至1699美元,96W适配器版直降320美元

闪存猎手
2026-08-20 10:15:20
日吹哑火!U18日本36分无缘世界杯,新西兰将和中国队争决赛席位

日吹哑火!U18日本36分无缘世界杯,新西兰将和中国队争决赛席位

章民解说体育
2026-08-21 22:24:47
北大副院长张丹丹称,灵活就业是福利,不像我们一样朝九晚五,被网友称“何不食肉糜”

北大副院长张丹丹称,灵活就业是福利,不像我们一样朝九晚五,被网友称“何不食肉糜”

Mr王的饭后茶
2026-08-21 12:30:02
小米18 Pro系列屏幕重磅升级:黑边不到1mm

小米18 Pro系列屏幕重磅升级:黑边不到1mm

快科技
2026-08-21 18:44:18
女患者被男医生揉胸后续:医生报警,荒谬一幕出现,果然不简单

女患者被男医生揉胸后续:医生报警,荒谬一幕出现,果然不简单

番外行
2026-08-21 09:20:22
英超回归!揭幕战-阿森纳vs考文垂,卫冕冠军轻取升班马

英超回归!揭幕战-阿森纳vs考文垂,卫冕冠军轻取升班马

智道足球
2026-08-21 21:24:40
姜泽廷、卢春龙与深圳市委书记靳磊会面交流

姜泽廷、卢春龙与深圳市委书记靳磊会面交流

中国政法大学
2026-08-21 22:06:36
邹市明和冉莹颖去民政局办理离婚,邹市明刻意带消磁身份证,并解释称:“敌进我退,敌退我进” ;两人因婚姻和债务问题引发热议

邹市明和冉莹颖去民政局办理离婚,邹市明刻意带消磁身份证,并解释称:“敌进我退,敌退我进” ;两人因婚姻和债务问题引发热议

大风新闻
2026-07-25 15:15:19
罗斯:我们拥有全中超最年轻的防线,防守不应只靠后卫线四人

罗斯:我们拥有全中超最年轻的防线,防守不应只靠后卫线四人

懂球帝
2026-08-21 20:10:31
5800万年轻人不交社保了:断缴的不是懒惰,是生存的算术

5800万年轻人不交社保了:断缴的不是懒惰,是生存的算术

互联网大观
2026-07-21 10:03:18
董路:我是外战胜率最高的中国教练 希望别像陈戌源李铁那样进去

董路:我是外战胜率最高的中国教练 希望别像陈戌源李铁那样进去

念洲
2026-08-21 16:15:37
风光散尽!前首富黄光裕近况曝光,隐居广州豪宅静养

风光散尽!前首富黄光裕近况曝光,隐居广州豪宅静养

静若梨花
2026-08-16 10:37:49
法国一葡萄园发现赤裸烧焦女尸,警方:确认系29岁网红,已逮捕两名男子

法国一葡萄园发现赤裸烧焦女尸,警方:确认系29岁网红,已逮捕两名男子

红星新闻
2026-08-20 13:21:18
顶级体坛流氓,逼走陈忠和、刘国梁、郎平,单挑 3 个体坛顶流

顶级体坛流氓,逼走陈忠和、刘国梁、郎平,单挑 3 个体坛顶流

酷侃体坛
2026-08-04 18:30:28
白酒立大功?医生发现:经常喝白酒的老人,或有7个健康益处

白酒立大功?医生发现:经常喝白酒的老人,或有7个健康益处

岐黄传人孙大夫
2026-07-31 18:35:03
香港知名演员遗孤现身,身高1.85米纹身显眼,生父身份神秘

香港知名演员遗孤现身,身高1.85米纹身显眼,生父身份神秘

时间巡查
2026-07-27 05:17:01
RTX 3070风扇狂转近5年 导热垫保护膜出厂未撕

RTX 3070风扇狂转近5年 导热垫保护膜出厂未撕

奶凶的小霸王
2026-08-21 11:42:01
印媒扬言,如巴基斯坦引进歼-35,印度将先发制人炸毁所在机场

印媒扬言,如巴基斯坦引进歼-35,印度将先发制人炸毁所在机场

老糿尾声体育解说
2026-08-20 17:58:27
“头睡得这么扁,她会自卑一辈子”,小学女生视频火了,家长被骂

“头睡得这么扁,她会自卑一辈子”,小学女生视频火了,家长被骂

世界圈
2026-08-16 13:27:40
NBA“炸了”!3年9700万!哈登续约骑士队,詹姆斯夺冠彻底悬了?

NBA“炸了”!3年9700万!哈登续约骑士队,詹姆斯夺冠彻底悬了?

行舟问茶
2026-08-21 12:59:29
2026-08-21 23:03:00
IT之家
IT之家
爱科技,爱这里 - 前沿科技人气平台
362000文章数 607456关注度
往期回顾 全部

科技要闻

阿里AI的两面:云赚56亿,千问烧掉138亿

头条要闻

日本议员想访华自称"应中方邀请" 各方回应来了

头条要闻

日本议员想访华自称"应中方邀请" 各方回应来了

体育要闻

续哈登+招沃特森=骑士赌了

娱乐要闻

冯绍峰七夕带儿子游玩!次日聚会

财经要闻

蔡昉解读经济:扩大消费需求的政策思考

汽车要闻

15万级顶格大五座/盲订7天破万 荣威家越07亮相成都车展

态度原创

房产
健康
亲子
教育
游戏

房产要闻

两大热盘即将入市!三亚又一批安居房狠货要炸场了!

“矫正神器”真能治好脊柱侧弯吗?

亲子要闻

这5条一定要讲给孩子们听!

教育要闻

五地中学生齐聚天安门,观礼升旗仪式

《GTA6》泄露没完了:新黑客现身 曝光渲染模型数据

无障碍浏览 进入关怀版