网易首页 > 网易号 > 正文 申请入驻

新测试表明 AI 实际办公准确率不足 25%,但进展比想象更快

0
分享至

来源:IT之家

Digital Trends 24 日报道,一项由训练数据公司 Mercor 发布的研究报告指出,当前主流人工智能模型在处理实际办公室任务时表现不佳,最高准确率未超过 25%,研究表明 AI 在短期内难以替代人类知识工作者

该研究基于 Mercor 新推出的 APEX-Agents 基准进行测试,有别于传统上通过写诗和解数学题为主的 AI 评估方法,该基准测试直接采用律师、顾问和银行家的真实工作流,要求受试模型完成横跨多个信息来源的多步骤综合任务。

结果显示,即使是市场上明显处于领先地位的模型也无法达到 25% 的准确率,测试中成绩领先的 Gemini 3 Flash 和 GPT-5.2,其准确率也仅为 24% 和 23%,而其他大多数受试模型的成绩则不高于 20%。


为何 AI 会在“办公测试”中失败?Mercor 首席执行官 Brendan Foody 分析称,AI 失败的关键在于缺乏上下文处理能力。在真实办公场景中,任务往往需要整合分散资源,比如查看日程,翻阅即时通讯记录、阅读 PDF 文档和电子表格,而 AI 在跨源信息搜索与整理时容易混淆、出错,要么干脆放弃。这导致目前的 AI 在办公室里更像一个“不可靠的实习生”,而非成熟的专业人员

IT之家附 APEX-Agents 准确率测试结果如下(排名从高到低):

  • Gemini 3 Flash (High) - 24.0%

  • GPT-5.2 (High) - 23.0%

  • Claude Opus 4.5 (High) - 18.4%

  • Gemini 3 Pro (High) - 18.4%

  • GPT-5 (High) - 18.3%

  • Grok 4 - 15.2%

  • GPT-OSS-120B (High) - 4.7%

  • Kimi K2 Thinking - 4.0%

尽管表现有限,但 AI 的进步引人关注。Foody 指出,一年前同类测试的准确率仅为 5%-10%,如今已提升至 24%,AI 的学习速度远超预期。不过,研究也强调,在掌握多任务处理和上下文切换之前,AI 尚无法胜任复杂的知识工作。

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
陈再方中将——开国上将陈锡联之子,遇上碰瓷勒索钱财的人,他冷笑:你们尽管过来试试

陈再方中将——开国上将陈锡联之子,遇上碰瓷勒索钱财的人,他冷笑:你们尽管过来试试

史海孤雁
2026-01-26 16:25:11
整天开会有啥必要啊?

整天开会有啥必要啊?

北京老付
2026-01-20 10:59:33
受贿金额巨大!又一大三甲原书记被查...

受贿金额巨大!又一大三甲原书记被查...

医疗器械经销商联盟
2026-01-26 13:30:21
U23亚洲杯结束,下一届分档曝光:越南跻身一档 中国队无缘前二档

U23亚洲杯结束,下一届分档曝光:越南跻身一档 中国队无缘前二档

侃球熊弟
2026-01-26 00:05:03
性能力与寿命关系被发现!60岁以后,睾酮水平越高,死亡风险越低

性能力与寿命关系被发现!60岁以后,睾酮水平越高,死亡风险越低

39健康网
2026-01-26 21:08:19
于北辰又闹笑话,称解放军进入台海就像高压洗车,“馆长”:悲哀

于北辰又闹笑话,称解放军进入台海就像高压洗车,“馆长”:悲哀

临云史策
2026-01-26 20:53:40
0-6!中超冠军溃败,申花队1-1爆冷,国足将大战乌兹别克斯坦队

0-6!中超冠军溃败,申花队1-1爆冷,国足将大战乌兹别克斯坦队

何老师呀
2026-01-26 19:31:55
某鱼惊现“天价笔”:800元一支的中性笔,藏着多少肮脏暗语?

某鱼惊现“天价笔”:800元一支的中性笔,藏着多少肮脏暗语?

戗词夺理
2026-01-24 16:05:41
1月26日晚间重要公告一览

1月26日晚间重要公告一览

GPLP
2026-01-26 18:26:55
一万人中,能有多少人晚年还能健全走路?少坐多站的人,告诉实话

一万人中,能有多少人晚年还能健全走路?少坐多站的人,告诉实话

健康科普365
2026-01-18 16:35:03
高盛策略师警告:全球股市“风暴”正在酝酿 回调或一触即发

高盛策略师警告:全球股市“风暴”正在酝酿 回调或一触即发

财联社
2026-01-26 15:04:05
即将加盟狼队!徐彬与女友抵达英国,队友们纷纷送祝福

即将加盟狼队!徐彬与女友抵达英国,队友们纷纷送祝福

懂球帝
2026-01-26 09:46:08
原来富二代家里都是做这些行业的!网友:几乎都在灰色产业游走

原来富二代家里都是做这些行业的!网友:几乎都在灰色产业游走

另子维爱读史
2026-01-26 18:34:27
徐百慧韵味全开!米色露肩长裙惊艳众人,不婚也能活成大女主?

徐百慧韵味全开!米色露肩长裙惊艳众人,不婚也能活成大女主?

娱乐领航家
2026-01-26 21:00:03
58岁那英改走颜值路线?过度医美变化大到认不出,这是要闹哪出?

58岁那英改走颜值路线?过度医美变化大到认不出,这是要闹哪出?

锋哥与八卦哥
2026-01-25 13:26:51
000078,7分钟直线涨停!医药股,突然全线爆发!

000078,7分钟直线涨停!医药股,突然全线爆发!

证券时报e公司
2026-01-26 17:19:35
中国被下套了!土耳其免签坑惨游客,首批国人已被收割到破产

中国被下套了!土耳其免签坑惨游客,首批国人已被收割到破产

阿钊是个小小评论员
2026-01-24 00:51:33
39岁女老师与19岁学生同居:女方高颜值照流出,大量私密细节披露

39岁女老师与19岁学生同居:女方高颜值照流出,大量私密细节披露

博士观察
2026-01-26 18:31:46
央视提醒!别再吃了!这40种“食品”抽检不合格,有人天天当早餐

央视提醒!别再吃了!这40种“食品”抽检不合格,有人天天当早餐

有范又有料
2026-01-25 16:50:13
广东将军山发现数米长蟒蛇 林业部门:遇到快走,系未开发区域

广东将军山发现数米长蟒蛇 林业部门:遇到快走,系未开发区域

新京报
2026-01-26 14:25:03
2026-01-26 21:31:00
中国能源网 incentive-icons
中国能源网
《中国能源报》社有限公司官网官方账号,专注能源行业报道的垂直媒体,是能源专业产经传媒平台。
65585文章数 968关注度
往期回顾 全部

科技要闻

印奇再上牌桌,阶跃融资50亿

头条要闻

德国防长建议特朗普道歉 但暗示并不真抱希望

头条要闻

德国防长建议特朗普道歉 但暗示并不真抱希望

体育要闻

叛逆的大公子,要砸了贝克汉姆这块招牌

娱乐要闻

张雨绮被实名举报代孕、插足婚姻

财经要闻

从美式斩杀线看中国社会的制度韧性构建

汽车要闻

宾利第四台Batur敞篷版发布 解锁四项定制创新

态度原创

时尚
游戏
艺术
房产
公开课

大衣里面穿什么?这件内搭才是今年冬天的“顶流”

《真三2复刻版》官宣延期!发售日未定 需更多打磨

艺术要闻

溥心畬的花鸟,淡雅清新

房产要闻

突发!三亚官宣,调整安居房政策!

公开课

李玫瑾:为什么性格比能力更重要?

无障碍浏览 进入关怀版