网易首页 > 网易号 > 正文 申请入驻

让AI学会“挑刺”:根据说明书+照片指出家具是否装错

0
分享至

来源:市场资讯

(来源:IT之家)

IT之家 9 月 26 日消息,Epoch AI 于当地时间 9 月 23 日进行了一组家具组装基准测试(Furniture Assembly Benchmark,FAB)。结果显示,多模态 AI 在识别宜家家具组装错误方面取得明显进展。

其中,OpenAI 最新的 GPT-6 Astra 在该基准测试中达到 80% 的准确率,相比 2025 年底提升近三倍。


FAB 是一项专门评估 AI 理解现实世界装配过程能力的测试。该测试用 60 张宜家家具组装过程照片评估 AI 模型的视觉与空间推理能力。测试人员选取三款宜家家具故意错误组装,并拍摄不同阶段的照片,要求 AI 将照片与官方安装说明书进行比对,找出错误位置并说明具体问题。

研究团队认为,这类能力与汽车维修、家电检修等需要结合图像和技术说明进行判断的任务具有较高相关性,因此具有一定实际应用价值。


在测试时,AI 不仅会获得组装时的照片,还会同时获得官方 PDF 说明书、图片放大工具以及 Python 解释器,需要判断是否存在错误,并指出具体出错步骤和问题描述。评分采用多阶段验证,只要模型能够正确定位错误步骤并大致说明问题,即可获得相应分数。

这项测试并非考察 AI 是否会背诵说明书,而是更接近真实使用场景:用户只需拍摄组装中的家具,AI 便需要判断零件是否装反、安装顺序是否错误,或是否遗漏了关键部件。

Epoch AI 认为,这类任务结合了图像理解、空间推理以及多步骤指令匹配能力,因此能够较好反映多模态模型处理现实问题的水平。随着相关能力提升,未来 AI 有望在家具组装、设备安装、维修指导等场景中提供更具针对性的实时辅助。


结果显示,OpenAI GPT-6 Astra 以 80% 的准确率位居榜首,Anthropic Claude Fable 5.1 和 Claude Opus 5 分别达到 70% 和 61%。

相比之下,2025 年 11 月时的领先模型 Claude Opus 4.5 准确率仅为 28%,意味着前沿模型在约 10 个月内实现了显著提升。


除了准确率提升,GPT-6 Astra 的推理效率也明显改善。其完成单张照片分析的中位耗时约为 3 分钟,是研究中速度最快的模型,比此前领先模型快约 2 至 10 倍。不过,研究团队认为,这一速度距离真正意义上的实时识别仍有一定差距。

研究还分析了不同模型的错误。例如,谷歌 Gemini 和阿里 Qwen 系列模型几乎总是先假设存在错误再去找错误;而早期 Anthropic 和 OpenAI 模型则相反,经常完全找不到错误。


研究者认为,不同家具对模型难度的影响与宜家复杂度指数无明显关联,错误隐蔽性、视角及错误后继续组装的程度影响更大。

在中国模型中,目前表现最好的开源权重模型 Kimi K3 相比国际前沿模型约落后 7 个月,这一差距比其在综合能力评估中的约 4.4 个月差距更大。研究认为,视觉推理能力仍是当前部分中国模型相对薄弱的方向,而 DeepSeek V4 Pro、GLM 5.3 等热门模型暂未提供图像支持。


特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
禹作敏曾在大邱庄定下规矩:正部级官员不带项目就不见,厅局级以下则看他心情;直到400名警察开到了村口

禹作敏曾在大邱庄定下规矩:正部级官员不带项目就不见,厅局级以下则看他心情;直到400名警察开到了村口

人生录
2026-09-28 17:22:51
刘欢留给女儿的4笔遗产,值得琢磨…

刘欢留给女儿的4笔遗产,值得琢磨…

媒体人溪婉
2026-09-29 12:25:52
哈萨克斯坦竞走选手就亚运金牌被剥夺提出上诉 旦增曲宗递补仍存悬念

哈萨克斯坦竞走选手就亚运金牌被剥夺提出上诉 旦增曲宗递补仍存悬念

漫川舟船
2026-09-29 11:04:24
财政部确认了:10月1日起,我国将对居民购房实施贷款贴息,聚焦首套刚需,单户所购住房建筑面积不超过120平方米、购房价格不超过150万元

财政部确认了:10月1日起,我国将对居民购房实施贷款贴息,聚焦首套刚需,单户所购住房建筑面积不超过120平方米、购房价格不超过150万元

吉刻新闻
2026-09-29 20:35:46
赵丽颖一天连续两次冲上热搜,粉丝看完彻底坐不住了

赵丽颖一天连续两次冲上热搜,粉丝看完彻底坐不住了

杰哥娱天下
2026-09-29 22:49:04
糖尿病根治重大突破?哈佛发现关键基因,可自身长出胰岛素!

糖尿病根治重大突破?哈佛发现关键基因,可自身长出胰岛素!

徐德文科学频道
2026-09-29 13:17:40
农夫山泉,已经不是一家卖水的公司了

农夫山泉,已经不是一家卖水的公司了

刺猬公社
2026-09-18 07:37:36
弄巧成拙了!网传义乌一饭店:客人白酒啤酒饮料连菜都自带,14个人只花430元,包厢还弄得满地垃圾

弄巧成拙了!网传义乌一饭店:客人白酒啤酒饮料连菜都自带,14个人只花430元,包厢还弄得满地垃圾

王老师你还好吗
2026-09-28 01:39:54
8号秀才21岁被裁!为得到他,狼队付出2首轮,结果选了不用毁掉了

8号秀才21岁被裁!为得到他,狼队付出2首轮,结果选了不用毁掉了

你的篮球频道
2026-09-29 09:56:09
新股上市,大涨675%!

新股上市,大涨675%!

证券时报
2026-09-29 10:38:03
记者提问谁是76人队内老大?杰伦-布朗:下一个问题

记者提问谁是76人队内老大?杰伦-布朗:下一个问题

懂球帝
2026-09-29 00:57:13
美方在台湾问题上有了新说辞:若中国和平统一,美国不会反对

美方在台湾问题上有了新说辞:若中国和平统一,美国不会反对

吕醿极限手工
2026-08-27 14:18:48
不给钱就卖到园区会所?22岁哈尔滨女孩王然,这次怕是凶多吉少了

不给钱就卖到园区会所?22岁哈尔滨女孩王然,这次怕是凶多吉少了

皮蛋儿电影
2026-09-22 11:20:47
S妈近照曝光,与侄女一起过中秋节状态很好,小S一家伦敦过中秋节

S妈近照曝光,与侄女一起过中秋节状态很好,小S一家伦敦过中秋节

东方不败然多多
2026-09-29 02:17:13
林诗栋德国登热搜第一!领奖台被观众嘲讽“打一单哦” 日媒:怪异氛围

林诗栋德国登热搜第一!领奖台被观众嘲讽“打一单哦” 日媒:怪异氛围

颜小白的篮球梦
2026-09-29 12:54:18
央视曝光!含量异常,又一网红食品彻底翻车,半年已成交超6万单

央视曝光!含量异常,又一网红食品彻底翻车,半年已成交超6万单

你在偷看谁
2026-09-29 22:27:10
2009年,刘欢的年收入大概在3200万左右

2009年,刘欢的年收入大概在3200万左右

岁月有情1314
2026-09-28 11:22:02
下半年来最强冷空气来袭!佛山最低气温降至……

下半年来最强冷空气来袭!佛山最低气温降至……

佛山发布
2026-09-29 12:55:02
国际章被“替换”了!?

国际章被“替换”了!?

八卦疯叔
2026-09-27 10:00:10
51岁蒋勤勤中秋逛环球被拍!白衬衫肚微凸被说像怀三胎,陈建斌坐婴儿车被嘲老人味重

51岁蒋勤勤中秋逛环球被拍!白衬衫肚微凸被说像怀三胎,陈建斌坐婴儿车被嘲老人味重

动物奇奇怪怪
2026-09-28 13:28:00
2026-09-29 23:47:00
新浪财经 incentive-icons
新浪财经
新浪财经是一家创建于1999年8月的财经平台
4928830文章数 9696关注度
往期回顾 全部

科技要闻

82亿美元收购!李飞飞将与苏姿丰并肩做AI

头条要闻

老人在景观桥上被虎头蜂蜇伤离世 家属:无人愿意担责

头条要闻

老人在景观桥上被虎头蜂蜇伤离世 家属:无人愿意担责

体育要闻

石雨豪:亚运金牌与背后的十年

娱乐要闻

赌王四房婚礼,何超琼带三房成员现身

财经要闻

央行调整完善若干货币政策工具

汽车要闻

搭华为乾崑ADS 5/设计风格换新 2027款纵横G700售30.49万起

态度原创

旅游
健康
时尚
本地
手机

旅游要闻

俄景点女游客蹦极前害怕反悔,被工作人员一把推下,女子丈夫忙着拍视频

洗脸越勤,痘痘反而越多?

早秋外套不用买太多太贵,准备几件长风衣,洒脱高级又百搭

本地新闻

中秋逛白塔寺,体验国医妙荟雅集

手机要闻

总分屈居第二 但视频独一档!iPhone18 Pro的视频实力依旧没人能追上

无障碍浏览 进入关怀版