网易首页 > 网易号 > 正文 申请入驻

为什么AI能流畅自信地给出完全错误的答案?

0
分享至

一位经理给AI发了条消息:“这个区域按我们的收费标准,送货费是多少?”几秒后,屏幕上跳出一段自信满满、语气专业的回复。他觉得没问题,直接复制进了给客户的邮件。第二天,他发现报价单里的一个数字是错的——而AI从头到尾没有给出过任何不确定的信号,连个“可能”的字眼都没有。

这种体验并非个例。许多人在工作中遇到过类似情况:AI的回答读起来头头是道,可一旦深究,事实却经不起推敲。更令人不安的是,即便你同时询问多个AI模型,得到一堆同样流利的答案,错误的可能性依然存在。因为它们犯错的逻辑,根植在技术底层。


要理解这一点,得先弄清楚AI到底是怎么给出答案的。它不像你想象的那样,会打开一个内置的“事实数据库”去核对。OpenAI的API文档直接点明了:开发者通过“提示词”来编程模型的行为,而模型的输出被明确定义为“非确定性”的——同样的输入,在不同的调用中可能产生不同的结果。这意味着,模型的回答不是从某个标准答案库中检索出来的,而是根据它学到的语言模式和当前提供的上下文,逐词地“续写”出最有可能的下文。

用更直白的话说,当你提问时,模型做的事就是:“基于我看到的文本,下一个词最可能是什么?”然后再基于新生成的词,继续猜下一个词。这个过程并不包含事实核查环节。这就导致了一个关键后果:如果在喂给模型的上下文中,你忘了放进某条关键信息——比如最新的收费标准——那么对于模型来说,这条信息根本就不存在。它不会告诉你“我缺少数据”,而是会用剩下的信息填补出一个听起来合理的数字,并且用同样肯定的语气告诉你。

更隐蔽的问题在于,即使你把所有必要信息都塞进了上下文窗口,也不代表模型一定会用到它们。2023年一项发表在顶级计算语言学期刊上的研究,指出了“迷失在中间”的现象:当模型处理长文本时,它对开头和结尾的信息抓取得最好,而对于处在中间位置的关键事实,准确率会明显下降,形成一条U形曲线。也就是说,你小心翼翼放进提示中间的那几行收费表,或那段法规原文,恰恰最容易被模型“看漏”。

这就能解释为什么一个简单的查询,AI会给出一个看似完美却包含致命错误的答案:不是它故意撒谎,而是它在续写时,既可能漏掉了你没给的数据,也可能根本没注意到你给过的数据。而无论哪种情况,它的语调都不会发生任何变化——因为它不会,也没有被设计成在不确定时举起手说:“等等,我需要核实一下。”

即使你使用那种能同时调用多个模型的聚合工具,也别被一连串流利的回复迷惑。多个模型犯同样错误的概率也许更低,但它们各自犯错的方式却可能相似,因为它们都建立在类似的概率续写机制上。最终,核实的责任仍然落在人身上。在下一次把AI的回答粘贴进重要文件前,最好停下来,想一想那句话背后到底有没有事实的锚点。

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
故事:产妇活蹦乱跳送进医院待产,晚上母婴双亡,通过录像得出真相

故事:产妇活蹦乱跳送进医院待产,晚上母婴双亡,通过录像得出真相

红豆讲堂
2024-12-19 10:54:00
澳方这回闯下大祸!澳方挑衅一中原则,中方反制不留半分余地?

澳方这回闯下大祸!澳方挑衅一中原则,中方反制不留半分余地?

影孖看世界
2026-07-28 22:25:48
长期感受不到快乐的人,可能不是抑郁,不是消极,而是……

长期感受不到快乐的人,可能不是抑郁,不是消极,而是……

木言观
2026-07-29 15:36:57
美军称伊朗发动突袭 国际油价一度涨超5%

美军称伊朗发动突袭 国际油价一度涨超5%

新华社
2026-07-29 10:06:06
梅西没说退,阿根廷足协也没催!奥莱报:他想踢,国家队就是他的

梅西没说退,阿根廷足协也没催!奥莱报:他想踢,国家队就是他的

刘哥谈体育
2026-07-30 04:05:44
宁波男子30秒钟连拿10个西瓜砸摊主头部,扬言“全给你买了”,原因曝光结局让人气愤

宁波男子30秒钟连拿10个西瓜砸摊主头部,扬言“全给你买了”,原因曝光结局让人气愤

Mr王的饭后茶
2026-07-29 22:41:22
伊朗:部分地区国家参与对伊战争

伊朗:部分地区国家参与对伊战争

财联社
2026-07-27 16:16:02
国产超强1TB SSD卖999元!和国际大厂几乎同价

国产超强1TB SSD卖999元!和国际大厂几乎同价

游民星空
2026-07-27 16:52:40
全国首个!广东一地设立新机构

全国首个!广东一地设立新机构

爱看剧的阿峰
2026-07-29 19:08:45
A股:今晚2.5亿股民,要兴奋到睡不着觉了,你知道为什么吗?

A股:今晚2.5亿股民,要兴奋到睡不着觉了,你知道为什么吗?

夜深爱杂谈
2026-07-29 20:46:47
人口告别世界第一?催生“二孩”无效后,国家终于向住房出手了!

人口告别世界第一?催生“二孩”无效后,国家终于向住房出手了!

混沌录
2026-05-30 23:41:14
美佛罗里达州六小时内连续处决两名死刑犯:分别为80多岁和68岁

美佛罗里达州六小时内连续处决两名死刑犯:分别为80多岁和68岁

红星新闻
2026-07-29 13:52:07
“性成瘾”是什么?患者自白:比烟瘾、酒瘾厉害多了,比戒毒还难

“性成瘾”是什么?患者自白:比烟瘾、酒瘾厉害多了,比戒毒还难

健康之光
2026-07-28 13:04:55
王虹在巴黎求学期间的军服标准照

王虹在巴黎求学期间的军服标准照

犀利辣椒
2026-07-28 06:23:00
国乒女队终于等来一个“怪才”了,接近一米八的身高,竟然还是个左撇子这种天赋有多吓人?

国乒女队终于等来一个“怪才”了,接近一米八的身高,竟然还是个左撇子这种天赋有多吓人?

乒乓助手
2026-07-28 00:19:14
央视直播排球时间表:7月30日CCTV5直播男排总决赛,意大利PK美国

央视直播排球时间表:7月30日CCTV5直播男排总决赛,意大利PK美国

薇说体育
2026-07-29 16:54:23
数据全方位碾压!阿森纳已经找到厄德高的升级版,身价高达1.5亿

数据全方位碾压!阿森纳已经找到厄德高的升级版,身价高达1.5亿

夜白侃球
2026-07-29 10:01:27
俄媒女主持人曾言:若中国愿出兵300万,俄军很快就能打败乌克兰

俄媒女主持人曾言:若中国愿出兵300万,俄军很快就能打败乌克兰

南宗历史
2026-03-17 16:53:10
云南抚仙湖百名游客乘船无人生还,探险者潜入水底发现惊人秘密

云南抚仙湖百名游客乘船无人生还,探险者潜入水底发现惊人秘密

兰姐说故事
2025-01-31 05:05:03
东契奇将召集湖人全队赴斯洛文尼亚集训 力求以领袖身份开启新时代

东契奇将召集湖人全队赴斯洛文尼亚集训 力求以领袖身份开启新时代

甜份超标的我
2026-07-30 03:11:09
2026-07-30 05:20:49
全栈遛狗员
全栈遛狗员
白天跟需求对线,晚上在小区遛狗。
366文章数 108关注度
往期回顾 全部

科技要闻

Kimi K3火爆,奥特曼:开源一定有一席之地

头条要闻

男女酒后驾车坠河身亡女子家属索赔近200万 法院判了

头条要闻

男女酒后驾车坠河身亡女子家属索赔近200万 法院判了

体育要闻

毫无存在感的NBA状元,最先谢谢惠顾?

娱乐要闻

55岁影帝黄政民出轨

财经要闻

天丝红牛多地检出成分不合格 企业申诉

汽车要闻

MG 07预售12.59万起 高阶版配激光雷达+CDC

态度原创

时尚
旅游
本地
手机
房产

第一批被打印机逼疯的家长,出现了

旅游要闻

小学课本里的威尼斯,长大后才看见另一半

本地新闻

跟着影视去旅行:八仙篇

手机要闻

实锤了!华为nova16 SE真机外观曝光:不仅撞脸荣耀,这颜值你打几分?

房产要闻

来了!广州首个现房销售项目,将落地南沙!

无障碍浏览 进入关怀版