网易首页 > 网易号 > 正文 申请入驻

盲人问香肠熟没熟,AI回了十倍长的画面解说

0
分享至

AI能描述一张照片、认出画面里的物体、回答摄像头拍到的东西。可当一个盲人只想要一句准话时,听一整篇关于场景的口头小作文,实在算不上帮忙。


马里兰大学(UMD)的研究者发现,AI视觉辅助会让盲人用户为了拿到真正需要的信息,先干上一大堆活。这项研究题为《Say It My Way: Exploring Control in Conversational Visual Question Answering with Blind Users》,考察的是人们如何与 Be My AI 互动——这是 Be My Eyes 应用里的一项AI功能。研究者发现,用户经常收到冗长的描述,这些描述没能充分回应他们的即时目标,逼得他们追问,或者想办法把AI引向更有用的答案。

问得短,答得长

研究招募了11名盲人参与者,先在实验室里试用 Be My AI,随后在日常生活里用了10天。团队分析了418次互动,看参与者怎么提问、怎么回应AI的答案、在结果不对路时怎么调整策略。

结果暴露出提问与回答之间的错位。参与者的问题通常在10到20个词左右,而AI的回答长度是问题的10倍以上。对话平均3轮,但有的拉长到21次来回。由于答案是朗读出来的,想找到一个有用的细节,可能得先听完一大堆无关信息。

有个例子是,一位盲人参与者想确认香肠熟没熟。AI反复报告某些部位看起来还是粉的,可用户想要的是接下来该怎么办的实用指导,而不是又一段对食物的描述。另一个案例里,一位参与者在找钥匙,收到的却是一大段对图像的描述,而不是围绕那件丢失物品的回答。超过一半的参与者认为,应用一上来就做整幅图像描述的习惯是个显著问题。

用户自己找绕路办法

参与者试了好几种办法来拿到更有用的答案。有人解释自己为什么问这个问题,给AI补上目标背景。有人把复杂任务拆成更小的问题。一位检查面包面团的参与者,分别询问了它的大小、表面、气泡和面粉,说这是确保答案正确的唯一办法。

用户虽然找到了引导AI的办法,研究也暴露了其他局限,包括难以判断距离和随时间发生的变化、图像取景方式对盲人不友好、以及摄像头该如何摆放缺乏指引。研究者主张,盲人用户不该为了得到简单答案而去掌握复杂的提示词。AI视觉辅助要做到真正无障碍,就得聚焦用户需要知道什么,给出清晰有用的回答,而不是让用户去绕开技术的短板。

毕竟,当有人问自己的钥匙在哪儿,他大概不需要一场关于整个房间的导览。

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
美国最致命的一步臭棋:搞垮苏联后得意忘形,亲手把中俄逼成生死搭档

美国最致命的一步臭棋:搞垮苏联后得意忘形,亲手把中俄逼成生死搭档

纪史行者
2026-10-27 01:00:05
寿司郎中国:已立即停业整顿

寿司郎中国:已立即停业整顿

蓬勃新闻
2026-10-26 19:22:40
“你们真的太保守了”,英语老师穿皮靴上课,年轻人却受不住了

“你们真的太保守了”,英语老师穿皮靴上课,年轻人却受不住了

熙熙说教
2026-10-26 14:10:24
网传老头老太太霸占众多饮品店,不消费闲坐打牌聊天,逼得饮品店开始宣布:不消费不入座!

网传老头老太太霸占众多饮品店,不消费闲坐打牌聊天,逼得饮品店开始宣布:不消费不入座!

黯泉
2026-10-26 11:31:10
大疆针对北京地区消费级无人机推出专属托管服务:最长可免费存储一年,后续每台每年199元

大疆针对北京地区消费级无人机推出专属托管服务:最长可免费存储一年,后续每台每年199元

IT之家
2026-10-26 17:28:41
股价震动!美股科技巨头,重大宣布!

股价震动!美股科技巨头,重大宣布!

证券时报
2026-10-26 21:49:04
一万人也劝不住,河南男子入职2月被外派飞东南亚,落地傻眼了

一万人也劝不住,河南男子入职2月被外派飞东南亚,落地傻眼了

天天热点见闻
2026-10-25 06:53:38
清晨,全线拉升!美联储,重磅来袭

清晨,全线拉升!美联储,重磅来袭

证券时报
2026-10-27 07:54:06
“地球最强悍SUV”破记录!问界M9连续五月拿下销量第一

“地球最强悍SUV”破记录!问界M9连续五月拿下销量第一

大厂财经社
2026-10-26 11:28:47
震惊!浙江女生发布视频讲述逛街经历,称父亲对过路女子反复上下扫视,网友:这是大义灭亲,还是欲加之罪

震惊!浙江女生发布视频讲述逛街经历,称父亲对过路女子反复上下扫视,网友:这是大义灭亲,还是欲加之罪

火山詩话
2026-10-25 17:15:40
重磅!任仲平来了

重磅!任仲平来了

环球时报国际
2026-10-26 17:09:55
又一百亿公司暴雷!总部人去楼空,创始人失联被立案,谁来承担?

又一百亿公司暴雷!总部人去楼空,创始人失联被立案,谁来承担?

娱乐圈见解说
2026-10-27 04:04:17
又一起悲剧!安徽女孩杨苗赴泰后失联,网传疑被诱骗至妙瓦底,网友怒斥:最后还得靠年迈的父母在网上发求助帖

又一起悲剧!安徽女孩杨苗赴泰后失联,网传疑被诱骗至妙瓦底,网友怒斥:最后还得靠年迈的父母在网上发求助帖

火山詩话
2026-10-26 16:12:27
内娱审美再下降,赵丽颖复出造型被群嘲,网友让她体面退休,太扎心

内娱审美再下降,赵丽颖复出造型被群嘲,网友让她体面退休,太扎心

蹲坑看世界
2026-10-26 12:33:13
大学老师工资将通过数字人民币钱包发放,江苏多所高校收到通知

大学老师工资将通过数字人民币钱包发放,江苏多所高校收到通知

IT之家
2026-10-26 13:36:10
武大教材风波再起!三位主编任的职信息被扒,均在二三本高校任职

武大教材风波再起!三位主编任的职信息被扒,均在二三本高校任职

卷史
2026-10-25 10:27:40
油价调整!“插翅”上涨,10月26日全国92,95汽油“大涨2375元/吨”,接近今年“峰值”后“又大涨”,10月29日调价,预涨超0.27元/升!

油价调整!“插翅”上涨,10月26日全国92,95汽油“大涨2375元/吨”,接近今年“峰值”后“又大涨”,10月29日调价,预涨超0.27元/升!

猪友巴巴
2026-10-26 14:40:06
哈登6中1 米切尔9+5!骑士50-60森林狼:数据暴露致命罪人!

哈登6中1 米切尔9+5!骑士50-60森林狼:数据暴露致命罪人!

运筹帷幄的篮球
2026-10-27 08:16:19
特朗普为何痴迷帮俄?撕掉最后一块遮羞布

特朗普为何痴迷帮俄?撕掉最后一块遮羞布

维美丽心甜
2026-10-26 19:30:11
NBA最新战力榜:雷霆第1,火箭第4,76人第5,湖人第7

NBA最新战力榜:雷霆第1,火箭第4,76人第5,湖人第7

弄月公子
2026-10-27 07:28:11
2026-10-27 09:27:00
报错免疫体
报错免疫体
一名在需求评审和数据异常中反复横跳的产品运营。
155文章数 84关注度
往期回顾 全部

科技要闻

苹果发iPad mini 8:5499元起售 配A20 Pro

头条要闻

牛弹琴:拉美左翼总统81岁连任 特朗普不得不做出回应

头条要闻

牛弹琴:拉美左翼总统81岁连任 特朗普不得不做出回应

体育要闻

13年后重回诺坎普,穆里尼奥又滑跪了

娱乐要闻

胡歌杨幂刘诗诗袁弘陈龙结伴去埃及

财经要闻

金价跌回8字头

汽车要闻

云辇-M上车 第二代海豹07让驾驶者也能爱上的家用车

态度原创

手机
健康
教育
公开课
军事航空

手机要闻

苹果霸占前四,W42单品销量盘点,国产第一是华为

痘痘能根治吗?皮肤科医生说实话

教育要闻

七林647、九宁642、四文637:头部高中录取线,家长该看位次不是死盯分

公开课

李玫瑾:为什么性格比能力更重要?

军事要闻

高清大图!歼-15红蓝对抗训练最新画面

无障碍浏览 进入关怀版