网易首页 > 网易号 > 正文 申请入驻

新测试表明AI实际办公准确率不足25%,但进展比想象更快

0
分享至

IT之家 1 月 26 日消息,Digital Trends 24 日报道,一项由训练数据公司 Mercor 发布的研究报告指出,当前主流人工智能模型在处理实际办公室任务时表现不佳,最高准确率未超过 25%,研究表明 AI 在短期内难以替代人类知识工作者


该研究基于 Mercor 新推出的 APEX-Agents 基准进行测试,有别于传统上通过写诗和解数学题为主的 AI 评估方法,该基准测试直接采用律师、顾问和银行家的真实工作流,要求受试模型完成横跨多个信息来源的多步骤综合任务。

结果显示,即使是市场上明显处于领先地位的模型也无法达到 25% 的准确率,测试中成绩领先的 Gemini 3 Flash 和 GPT-5.2,其准确率也仅为 24% 和 23%,而其他大多数受试模型的成绩则不高于 20%。


为何 AI 会在“办公测试”中失败?Mercor 首席执行官 Brendan Foody 分析称,AI 失败的关键在于缺乏上下文处理能力。在真实办公场景中,任务往往需要整合分散资源,比如查看日程,翻阅即时通讯记录、阅读 PDF 文档和电子表格,而 AI 在跨源信息搜索与整理时容易混淆、出错,要么干脆放弃。这导致目前的 AI 在办公室里更像一个“不可靠的实习生”,而非成熟的专业人员

IT之家附 APEX-Agents 准确率测试结果如下(排名从高到低):

  • Gemini 3 Flash (High) - 24.0%
  • GPT-5.2 (High) - 23.0%
  • Claude Opus 4.5 (High) - 18.4%
  • Gemini 3 Pro (High) - 18.4%
  • GPT-5 (High) - 18.3%
  • Grok 4 - 15.2%
  • GPT-OSS-120B (High) - 4.7%
  • Kimi K2 Thinking - 4.0%

尽管表现有限,但 AI 的进步引人关注。Foody 指出,一年前同类测试的准确率仅为 5%-10%,如今已提升至 24%,AI 的学习速度远超预期。不过,研究也强调,在掌握多任务处理和上下文切换之前,AI 尚无法胜任复杂的知识工作。

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
领导一个人在办公室经常都干嘛?网友:怪不得人人都想当领导呢!

领导一个人在办公室经常都干嘛?网友:怪不得人人都想当领导呢!

夜深爱杂谈
2026-03-15 19:19:57
北京公交专用道行驶时间,又有新调整!

北京公交专用道行驶时间,又有新调整!

BRTV新闻
2026-04-28 12:40:41
中菲关系骤变!马科斯的反华声明引发全球关注!

中菲关系骤变!马科斯的反华声明引发全球关注!

橙色书卷
2026-04-27 21:19:22
太心疼!马筱梅哭到停更,带娃逃回台湾:凭啥要我和孩子遭这罪?

太心疼!马筱梅哭到停更,带娃逃回台湾:凭啥要我和孩子遭这罪?

她时尚丫
2026-04-28 23:19:49
失业后在小县城的两年发现,打麻将和性生活才是普通人底色!

失业后在小县城的两年发现,打麻将和性生活才是普通人底色!

黯泉
2026-04-01 17:44:20
北京车展最具争议的新车:上市一小时狂揽11079台锁单量,凭啥?

北京车展最具争议的新车:上市一小时狂揽11079台锁单量,凭啥?

车之养护
2026-04-27 10:36:10
4.29日早评|风云突变!美伊大消息!A股炸了!

4.29日早评|风云突变!美伊大消息!A股炸了!

龙行天下虎
2026-04-29 06:23:51
台湾人真的很可怜

台湾人真的很可怜

覆言国际
2026-04-27 18:49:55
WTA爆大冷!萨巴伦卡1-2遭逆转,错失6个赛点,世界前8全出局了

WTA爆大冷!萨巴伦卡1-2遭逆转,错失6个赛点,世界前8全出局了

体育就你秀
2026-04-29 06:10:25
轮到银行发愁了!越来越多的储户,要把存款分散到多家银行?

轮到银行发愁了!越来越多的储户,要把存款分散到多家银行?

老特有话说
2026-04-28 16:00:15
华为余承东:尊界新车价格在200万左右

华为余承东:尊界新车价格在200万左右

界面新闻
2026-04-26 13:08:56
美媒称战事爆发以来美损失惨重

美媒称战事爆发以来美损失惨重

界面新闻
2026-04-27 22:43:03
因为没钱,社会上已经出现了4大“反常现象”,看看你碰到了没?

因为没钱,社会上已经出现了4大“反常现象”,看看你碰到了没?

细说职场
2026-04-26 14:29:20
孔帕尼:次回合可能很相似只是进球没这么多,我已经迫不及待

孔帕尼:次回合可能很相似只是进球没这么多,我已经迫不及待

懂球帝
2026-04-29 06:40:08
7岁女孩独自走6公里上学,只有小狗相伴引发关注。

7岁女孩独自走6公里上学,只有小狗相伴引发关注。

一丝不苟的法律人
2026-04-27 14:58:35
有谁留意:杜锋输球黑脸光速退场,徐杰拉着0分先生胡明轩不让走

有谁留意:杜锋输球黑脸光速退场,徐杰拉着0分先生胡明轩不让走

体坛野秀才
2026-04-29 00:20:43
故事:聂磊称霸青岛十几年,最后因惹上一个女人,踢到铁板就此灭亡

故事:聂磊称霸青岛十几年,最后因惹上一个女人,踢到铁板就此灭亡

红豆讲堂
2024-12-17 10:54:23
58岁阿丘近况曝光,住破旧屋子,身材发福,出轨离婚晚年生活凄凉

58岁阿丘近况曝光,住破旧屋子,身材发福,出轨离婚晚年生活凄凉

胡一舸南游y
2026-04-28 14:16:22
婚介所彻底变天!因没有男客户而倒闭,转变成了专坑女人的杀猪盘

婚介所彻底变天!因没有男客户而倒闭,转变成了专坑女人的杀猪盘

谭谈社会
2026-04-27 19:01:19
艺考生:砸光父母积蓄,终成“廉价打工人”,谁在制造这场骗局?

艺考生:砸光父母积蓄,终成“廉价打工人”,谁在制造这场骗局?

社会日日鲜
2026-04-27 12:38:49
2026-04-29 07:35:00
IT之家
IT之家
爱科技,爱这里 - 前沿科技人气平台
341653文章数 607171关注度
往期回顾 全部

科技要闻

10亿周活目标落空!传OpenAI爆发内部分歧

头条要闻

美国禁止本国个人或实体向伊朗缴纳霍尔木兹通行费

头条要闻

美国禁止本国个人或实体向伊朗缴纳霍尔木兹通行费

体育要闻

魔术黑八活塞,一步之遥?!

娱乐要闻

蔡卓妍官宣结婚,老公比她小10岁

财经要闻

中央政治局会议定调,八大看点速览!

汽车要闻

拒绝疯狂套娃!现代艾尼氪金星长在未来审美点上

态度原创

教育
家居
亲子
房产
公开课

教育要闻

人生如何选择要结合自身实际情况

家居要闻

江景风格 流动的秩序

亲子要闻

拍这期视频时眼泪止不住地流

房产要闻

红利爆发!海南,冲到全国人口增量第4省!

公开课

李玫瑾:为什么性格比能力更重要?

无障碍浏览 进入关怀版