网易首页 > 网易号 > 正文 申请入驻

被AI戏弄、遭AI中伤,谁来按下“纠错键”?

0
分享至



AI闹出“乌龙”,近期屡成热点。有人被AI挖坑,也有人被AI中伤。

事例清单正不断累积:有用户让AI预约线下餐厅,到店后却被告知预订无效;有用户手机号被AI错误标记为养殖场电话,频繁遭陌生人打电话询问是否卖野猪;有人轻信AI给出的“退机票手续费低”的信息,最终蒙受金钱损失;还有包括律师在内的人士,被AI“脑补”一系列无中生有的罪名。

这些AI犯错的情形,通常被归入“AI幻觉”的范畴。包括DeepSeek在内的许多模型厂商,已将降低幻觉率作为模型更迭的重要目标。但业内普遍认为,幻觉难以彻底根除。

在此背景下,我们应该如何与AI幻觉共处,正成为一项至关重要的社会议题。6月12日举办的南都数字经济治理沙龙第21期,聚焦AI幻觉的治理,多位业内专家分享了行业内应对AI幻觉的现行解决方案及局限性,并强调提升用户AI素养在当今时代的紧迫性。

内生幻觉的系统性解法

在360智脑技术副总裁、360 AI高级研究员孙林看来,AI幻觉不只是模型上的bug(错误),而是从数据、模型、系统到产品多个环节共同导致的系统性结果。因此,对其治理也从多个维度推进。

孙林提到,数据是AI幻觉产生的一个重要因素。互联网上积累了海量数据,而其中虚假信息泛滥。AI幻觉治理的前提,是将数据做得更全、更真,对互联网上大量的虚假信息进行清洗和治理,形成高质量的数据集。

一般来说,模型参数越小,越容易出现幻觉。孙林认为,这也是模型参数不断扩大的一项原因,通过增强模型的能力,减少幻觉或错误带来的影响。与此同时,RAG(检索增强生成)技术也被用于减少幻觉,让AI尽可能调用权威信源。

而在产品运营层面,当某一具体的AI幻觉案例被监管部门等指出时,企业会有针对性的处理。

孙林坦言,从技术到运营,企业已采取了不少措施来减轻AI幻觉。但要发现和解决所有问题,几乎不可能。这并不是有些工作企业不愿意做,而是当前的技术确实还做不到。

外在“投毒”攻防战

如果说AI幻觉是模型自然发生的内生问题,那么GEO(生成式引擎优化)“投毒”则是人为地从外部干扰AI的回答。

2026年“3·15”晚会曾曝光GEO业务的兴起。一些GEO服务商通过大量撰写推广软文并在互联网平台发布,让AI模型在抓取和训练数据时获取这些内容,从而提高客户产品在AI推荐中的排名。相关服务商宣称,只要支付费用,就可以让客户的产品在任何主流AI大模型的回答中“做到排名前三位”。

孙林介绍,传统搜索引擎公司的广告业务,受到大模型产品较大的冲击。GEO业务已经成为所有与互联网广告相关的企业都无法回避的现实问题。在积极为广告主和服务商提供GEO服务的同时,相关公司也需要对黑产利用GEO进行恶意攻击展开防御。

中国信息通信研究院人工智能研究所安全治理部主任石霖表示,GEO技术本身是中性的,并无好坏之分,关键在于如何使用。一些服务商和内容生产方,通过数据“投毒”的方式,达到影响AI内容输出的目的,这种滥用是需要被规范的,甚至被禁止的。此种内容污染往往是一个潜移默化、且持久深远的过程,可能衍生出一系列负面后果。

“就像种地一样,如果土地被污染了,就难以种出好的庄稼;同理,如果网络空间被污染了,就可能训练不出优质的大模型。”石霖建议,应当明确一种正向积极的导向,倡导大家不去做那些恶意编造虚假信息、污染网络空间的事情。

北京交通大学法学院副教授付新华建议,针对“投毒”者、恶意诱导者等行为主体,法律可以从不正当竞争、虚假宣传,以及网络黑灰产治理等角度,对相关行为进行追责。同时,平台应承担反“投毒”义务,例如优先采用可信来源、优先采用权威来源,以及确保引用链条可追溯等。

提升AI素养迫在眉睫

“AI更像一个还不错的朋友,但并非无所不能,也谈不上很权威。”孙林将厘清AI的角色定位,视作提升AI素养的前提。

在他看来,大模型的能力提升伴随更高的成本投入。因此,如果要获得更优质的AI服务,付费订阅是一种符合朴素常识的选择。按照他的使用体验,一些免费的AI应用,输出错误信息的情况越发明显,导致他不得不放弃使用,转而更多使用付费的产品。

未成年人作为AI时代的原住民,更是提升AI素养的重要关切对象。

清华大学新闻与传播学院博士后张诗瑶在家庭教育相关调研中发现,当代小学生的信息获取渠道已发生颠覆性变革:八九成的孩童不再局限于书本、课堂与长辈教导,而是通过豆包等人工智能工具获取各类信息。当下,AI对青少年的价值早已突破单纯的信息查询工具范畴,既成为部分孩子的情感倾诉与精神寄托,也成为家庭教育中家长常用的辅助帮手。在全民数字化的时代背景下,大众已然将AI视作全能的“智能百科全书”,深度融入日常学习与生活。

AI全面普及的同时,AI幻觉带来的信息失真、内容失准等问题愈发凸显,培育全民AI素养、建立科学的AI使用思维,成为抵御AI幻觉的核心关键。对此,张诗瑶提出核心建议,应将AI素养系统性纳入全民科学传播体系,摒弃笼统化、统一化的普及模式,针对不同年龄、职业、使用场景的用户群体,开展分层分类、精准个性化的AI素养专项培训。

她认为,数字时代的媒介素养培育,亟须完成迭代升级。过去公众的媒介教育核心是信息素养,重点在于甄别网络虚假新闻、辨别劣质信息;而在AI深度应用的新阶段,大众需要实现认知升级,迈入全新的AI素养阶段。核心能力不再是被动辨别信息真伪,而是主动溯源信息来源、理性独立研判内容可信度,摆脱对AI的绝对依赖,始终将信息判断与行为决策的主动权掌握在自己手中,从思维根源上抵抗AI幻觉带来的认知偏差与决策失误。

出品:南都数字经济治理研究中心

采写:南都N视频记者 杨柳

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
注意!广东省民政厅公布2026年第一批非法社会组织名单

注意!广东省民政厅公布2026年第一批非法社会组织名单

南方都市报
2026-08-04 15:45:10
870亿紧急续命!日元彻底跌穿底:日本的国运,早已彻底烂透

870亿紧急续命!日元彻底跌穿底:日本的国运,早已彻底烂透

浪子的烟火人间
2026-08-05 00:24:06
庄思明杨明婚礼现场细节曝光!马蹄露成功抢到花球 傅明宪罕见现身担任顶酒员

庄思明杨明婚礼现场细节曝光!马蹄露成功抢到花球 傅明宪罕见现身担任顶酒员

TVB资讯台
2026-08-03 23:16:03
吴奇隆成立公司,要赵丽颖出10万元,给她1%的股份。赵丽颖碍于情面,答应了,没想到后来赚了5000万

吴奇隆成立公司,要赵丽颖出10万元,给她1%的股份。赵丽颖碍于情面,答应了,没想到后来赚了5000万

互联网品牌官
2026-07-31 10:16:48
“免疫力强”的人,一般有十个特征,若能达到七个,很不错!

“免疫力强”的人,一般有十个特征,若能达到七个,很不错!

叙说医疗健康
2026-08-03 05:00:15
朱女士丈夫的小三,有4家公司1个茶社,30多岁就实现了财富自由

朱女士丈夫的小三,有4家公司1个茶社,30多岁就实现了财富自由

江山挥笔
2026-08-04 20:03:20
舔狗可以舔到什么程度?留下你们的截图,我想开开眼界!

舔狗可以舔到什么程度?留下你们的截图,我想开开眼界!

夜深爱杂谈
2026-07-29 21:35:48
耗资208亿修成的南天高速车流稀少,广西高速建设真的走错路了吗

耗资208亿修成的南天高速车流稀少,广西高速建设真的走错路了吗

水泥土的搞笑
2026-08-04 06:14:41
上海市政府关于将部分行政执法事项交由街道办事处乡镇政府行使的决定

上海市政府关于将部分行政执法事项交由街道办事处乡镇政府行使的决定

上海黄浦
2026-08-04 12:48:54
台风白海豚或于9日前后登陆

台风白海豚或于9日前后登陆

财联社
2026-08-04 11:51:03
一地下党被上级叫去谈工作,相谈不久忽发现,眼前的领导有问题

一地下党被上级叫去谈工作,相谈不久忽发现,眼前的领导有问题

云端小院
2026-08-04 07:11:35
黄鼠狼到大爷家偷鸡被抓,大爷心软放了它,5天后进鸡圈大爷愣了

黄鼠狼到大爷家偷鸡被抓,大爷心软放了它,5天后进鸡圈大爷愣了

兰姐说故事
2025-07-10 10:00:10
《这一秒过火》大结局慕容清峄最终葬身火海,跟张明殊同归于尽

《这一秒过火》大结局慕容清峄最终葬身火海,跟张明殊同归于尽

可乐谈情感
2026-08-04 17:17:34
欠了网贷和银行的钱,这辈子也还不起了,最坏的结果无非这三种

欠了网贷和银行的钱,这辈子也还不起了,最坏的结果无非这三种

细说职场
2026-08-03 13:07:15
中国送一句毛主席的话给菲律宾,马科斯应该明白:再晚就来不及了

中国送一句毛主席的话给菲律宾,马科斯应该明白:再晚就来不及了

星落山间
2026-08-03 20:43:49
周启豪和温瑞博止步首轮,男队面临的压力大,女队更加稳定

周启豪和温瑞博止步首轮,男队面临的压力大,女队更加稳定

子水体娱
2026-08-05 00:17:33
一加油站被曝“提枪未加油、数值自动增长”,市场监管部门:涉事站点已停业,加油机封存送检,公安机关介入

一加油站被曝“提枪未加油、数值自动增长”,市场监管部门:涉事站点已停业,加油机封存送检,公安机关介入

蓬勃新闻
2026-08-03 22:54:15
看到此人请立刻报警!河南一地发生重大刑事案件 51岁嫌犯在逃

看到此人请立刻报警!河南一地发生重大刑事案件 51岁嫌犯在逃

闪电新闻
2026-08-03 11:29:43
广东泄愤扔快递的女子“社死”了,拒不承认还骂人,名声彻底臭了

广东泄愤扔快递的女子“社死”了,拒不承认还骂人,名声彻底臭了

港湾无船
2026-08-04 05:05:58
洽洽瓜子、思念水饺等被美国限制进口,在美华人:生活成本或将提高,感觉莫名其妙

洽洽瓜子、思念水饺等被美国限制进口,在美华人:生活成本或将提高,感觉莫名其妙

极目新闻
2026-08-04 21:13:40
2026-08-05 01:36:49
南方都市报 incentive-icons
南方都市报
换一种方式,南都在现场。
625707文章数 3589969关注度
往期回顾 全部

科技要闻

Anthropic老板急了:挖来的人,可能只为钱

头条要闻

说出"冯院长挺喜欢你"的局长被停职 涉事冯院长发声

头条要闻

说出"冯院长挺喜欢你"的局长被停职 涉事冯院长发声

体育要闻

斯卢茨基告别申花:1座城市和14亿份难忘的回忆

娱乐要闻

李荣浩《小眼睛》被指抄袭,撤销署名

财经要闻

美国盯上了中国光模块

汽车要闻

方程S系列将于成都车展发布内饰 9月上旬新车上市即交付

态度原创

教育
艺术
时尚
本地
旅游

教育要闻

8月1日,济南,“经纬・启行”正式启航,打造《经纬中国・少年行》数智研学新标杆

艺术要闻

俄罗斯当代女画家——玛格丽塔·奇格纳

夏天发型想清爽又好看,关键一步很多人都没做对

本地新闻

课本里的童年,绍兴正上演

旅游要闻

一座山,一片林,一个民族:法罕山读懂边地民族对山河的敬畏!

无障碍浏览 进入关怀版