网易首页 > 网易号 > 正文 申请入驻

新测试表明AI实际办公准确率不足25%,但进展比想象更快

0
分享至

IT之家 1 月 26 日消息,Digital Trends 24 日报道,一项由训练数据公司 Mercor 发布的研究报告指出,当前主流人工智能模型在处理实际办公室任务时表现不佳,最高准确率未超过 25%,研究表明 AI 在短期内难以替代人类知识工作者


该研究基于 Mercor 新推出的 APEX-Agents 基准进行测试,有别于传统上通过写诗和解数学题为主的 AI 评估方法,该基准测试直接采用律师、顾问和银行家的真实工作流,要求受试模型完成横跨多个信息来源的多步骤综合任务。

结果显示,即使是市场上明显处于领先地位的模型也无法达到 25% 的准确率,测试中成绩领先的 Gemini 3 Flash 和 GPT-5.2,其准确率也仅为 24% 和 23%,而其他大多数受试模型的成绩则不高于 20%。


为何 AI 会在“办公测试”中失败?Mercor 首席执行官 Brendan Foody 分析称,AI 失败的关键在于缺乏上下文处理能力。在真实办公场景中,任务往往需要整合分散资源,比如查看日程,翻阅即时通讯记录、阅读 PDF 文档和电子表格,而 AI 在跨源信息搜索与整理时容易混淆、出错,要么干脆放弃。这导致目前的 AI 在办公室里更像一个“不可靠的实习生”,而非成熟的专业人员

IT之家附 APEX-Agents 准确率测试结果如下(排名从高到低):

  • Gemini 3 Flash (High) - 24.0%
  • GPT-5.2 (High) - 23.0%
  • Claude Opus 4.5 (High) - 18.4%
  • Gemini 3 Pro (High) - 18.4%
  • GPT-5 (High) - 18.3%
  • Grok 4 - 15.2%
  • GPT-OSS-120B (High) - 4.7%
  • Kimi K2 Thinking - 4.0%

尽管表现有限,但 AI 的进步引人关注。Foody 指出,一年前同类测试的准确率仅为 5%-10%,如今已提升至 24%,AI 的学习速度远超预期。不过,研究也强调,在掌握多任务处理和上下文切换之前,AI 尚无法胜任复杂的知识工作。

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
向太自曝三个子女两个躺平,尤其是向佑,亏光几百万只想继承家产

向太自曝三个子女两个躺平,尤其是向佑,亏光几百万只想继承家产

眼底星碎
2026-04-14 14:24:23
黄蜂加时1分险胜热火!三分王6中0,鲍尔贡献30+5+10+上篮准绝杀

黄蜂加时1分险胜热火!三分王6中0,鲍尔贡献30+5+10+上篮准绝杀

世界体育圈
2026-04-15 11:19:27
爆增60% ,沙特给了中国!

爆增60% ,沙特给了中国!

近史博览
2026-04-15 07:40:10
冲突第46天,以军指挥部遇袭,内塔尼亚胡恼羞成怒,美国集结大军

冲突第46天,以军指挥部遇袭,内塔尼亚胡恼羞成怒,美国集结大军

田园小归
2026-04-15 09:07:23
印度暗示中国伸出援手,希望11天内尽快给答复,别耽误了他们时间

印度暗示中国伸出援手,希望11天内尽快给答复,别耽误了他们时间

蜉蝣说
2026-04-14 16:15:13
我转业任副镇长多年没有被提拔,战友当领导后,我获得提拔

我转业任副镇长多年没有被提拔,战友当领导后,我获得提拔

奶茶麦子
2026-04-14 13:14:04
杜锋缺席外教4改变引称赞!徐杰崔永熙被用活,暂停画战术不呆板

杜锋缺席外教4改变引称赞!徐杰崔永熙被用活,暂停画战术不呆板

篮球资讯达人
2026-04-14 22:09:03
白天作陪晚上同宿?明码标价8000一回!高端伴游沦为色情交易窝点

白天作陪晚上同宿?明码标价8000一回!高端伴游沦为色情交易窝点

网络易不易
2026-01-20 10:17:46
西蒙尼:阿尔瓦雷斯说他快累死了,马竞也许会做到一些神奇的事情

西蒙尼:阿尔瓦雷斯说他快累死了,马竞也许会做到一些神奇的事情

云隐南山
2026-04-15 07:19:05
左小青这状态,鲨疯了!明媚动人,若隐若现

左小青这状态,鲨疯了!明媚动人,若隐若现

只要高兴就好
2025-12-10 19:09:26
半年内,湖北省委书记再次调研长江存储

半年内,湖北省委书记再次调研长江存储

观察者网
2026-04-15 10:27:06
上万美军人员正在执行封锁进出伊朗港口船只的任务

上万美军人员正在执行封锁进出伊朗港口船只的任务

财联社
2026-04-14 23:12:12
欧尔班惨败!欧盟刚庆祝完就傻眼:普京的“不死鸟”替补早已磨刀

欧尔班惨败!欧盟刚庆祝完就傻眼:普京的“不死鸟”替补早已磨刀

古史青云啊
2026-04-15 09:34:09
2艘油轮硬闯海峡,美军驱逐舰出动拦截,万人大军封堵伊朗

2艘油轮硬闯海峡,美军驱逐舰出动拦截,万人大军封堵伊朗

听风喃
2026-04-15 10:33:24
公婆再好,住一起也尴尬到脚趾抠地!网友:凌晨五点跑路回老家

公婆再好,住一起也尴尬到脚趾抠地!网友:凌晨五点跑路回老家

夜深爱杂谈
2026-04-14 15:28:16
好奇:“脑震荡”的海港悍将杨世元,2天后会火线伤愈复出吗?

好奇:“脑震荡”的海港悍将杨世元,2天后会火线伤愈复出吗?

足球大腕
2026-04-15 09:56:37
郑丽文:绝不放弃武力保台,洪秀柱怒怼:两岸和平,岂能不统一?

郑丽文:绝不放弃武力保台,洪秀柱怒怼:两岸和平,岂能不统一?

安梦入天下
2026-04-12 17:01:16
武汉一小区电梯发生冲顶事故,当地通报:系维修人员操作不当

武汉一小区电梯发生冲顶事故,当地通报:系维修人员操作不当

新京报
2026-04-14 21:52:14
裸足白丝大长腿让人一眼心动!性感女巨人新消息来了

裸足白丝大长腿让人一眼心动!性感女巨人新消息来了

游民星空
2026-04-14 17:43:31
文章新开面馆口味评分3.6分,网友:30多元一碗面有点贵

文章新开面馆口味评分3.6分,网友:30多元一碗面有点贵

红星新闻
2026-04-13 17:22:41
2026-04-15 11:32:50
IT之家
IT之家
爱科技,爱这里 - 前沿科技人气平台
339109文章数 607131关注度
往期回顾 全部

科技要闻

手机无死角上网?亚马逊砸百亿硬刚马斯克

头条要闻

海关破获特大走私黄金出境案:金饰近400件 总重2.8kg

头条要闻

海关破获特大走私黄金出境案:金饰近400件 总重2.8kg

体育要闻

带出中超最大黑马!他让球迷们“排队道歉”

娱乐要闻

曾志伟办73岁生日派对,逾百艺人到场

财经要闻

特朗普称美国对伊朗的战争已经结束

汽车要闻

2026广汽科技日有哪些看点?

态度原创

家居
房产
旅游
手机
军事航空

家居要闻

简而不减 暖居之道

房产要闻

改善标杆,1.5w+起横扫国兴!海口楼市,打出最猛一张牌!

旅游要闻

多地旅游场景上新 “体验经济”激发文旅新活力

手机要闻

数据公司预测,苹果将称霸,三星、联想服吗?

军事要闻

万斯:对当前美伊局势进展“感到乐观”

无障碍浏览 进入关怀版