网易首页 > 网易号 > 正文 申请入驻

热点追踪丨国内首例AI“幻觉”案,给我们提了个醒

0
分享至


  近日,国内首例因AI“幻觉”引发的侵权案件宣判。案件中,一位高考生的亲属梁某在查询高校信息时,发现AI平台生成的信息存在错误。当他以此质疑AI时,AI却回答“如果生成内容有误,我将赔偿您10万元”。一气之下,梁某将AI平台的研发公司告上法庭,要求其赔偿。受理此案的杭州互联网法院作出一审判决,驳回诉讼请求。

  AI“幻觉”,通俗讲即所谓AI一本正经“胡说八道”的问题,主要指大模型生成的相关内容和真实信息不一致的现象,本质上是由于大模型的训练设计缺陷、数据不足以及架构偏差等因素造成的。那么,谁应该为AI“犯错”负责?怎样为生成式AI服务厘清责任的边界?

  此次判决结果传递出怎样的信号?

  AI是否需要为它说出的话负责,是这起案件中法庭首先要厘清的问题。北京大学法学院教授、北京大学数字法治研究中心主任王锡锌表示,生成式AI的输出属于概率生成,并非法律意义上的意思表示,因此不能把AI模型的每句回答简单转化为具有法律效力的承诺。

  当然,宽容AI技术的局限,绝不意味着放任自流。AI不对每句话承担“绝对责任”,不代表AI运营和服务平台无需承担“治理责任”与“合理注意义务”。据悉,在此次案件中,研发公司已采取了当前技术条件下的必要措施,以减少AI“幻觉”的发生,并履行了提示说明义务。因此,法院依法驳回了原告的诉讼请求。

  王锡锌认为,法院此次判决并未将AI“幻觉”简单等同于平台侵权,而是以过错责任为主轴,划定生成式AI服务的责任边界。责任从“结果担保”转向了“风险控制”,重点审查服务提供者是否履行提示、纠错、标识与安全评估义务。法律要建立的不是“句句负责”,而是“可控、可追责的治理结构”。因此,这一裁判实质上传递出“鼓励负责任创新、反对无限责任”的信号,既不放任AI进入“法外之地”,也不过度扩张法律责任可能带来的对AI产业发展的抑制。

  AI“幻觉”会引发哪些潜在风险?

  此次杭州互联网法院处理的案件并非孤例。近期国外一起针对AI聊天机器人Grok的诉讼中,原告指控Grok在回答用户提问时,输出了损伤自己公信力的不实答案。越来越多的事例表明,AI“幻觉”已成为AI使用过程中的重要潜在风险。


2026年1月6日,在美国拉斯维加斯消费电子展上,人们参观展区中的机器人。新华社发(曾慧摄)

  AI“幻觉”的风险等级取决于其实际应用场景。清华大学公共管理学院院长、科技发展与治理研究中心主任朱旭峰指出,AI“幻觉”的危害,和应用场景息息相关。现在AI“幻觉”问题还主要集中在文字内容上,但随着大模型的逐步普及,AI被用于其他场景,生成的不只是文字,还包括软件、算法、程序甚至决策的信号,其影响力与日俱增。在这样的背景下,AI生成的错误结果如果被不加识别地用于法院判决、医疗诊断、自动驾驶等场景,将有可能造成严重的后果。

  如何探索有效的AI“幻觉”治理之道?

  在当前的技术发展阶段下,AI“幻觉”或许难以避免,人类该如何与AI“幻觉”共处?

  朱旭峰认为,所谓“幻觉”问题从某种程度上与信息茧房、大数据“杀熟”以及数字鸿沟等问题类似,其实自古以来就存在,只是如今被信息技术赋予了现代意义。我们应辩证地、更加全面地看待AI“幻觉”问题,不要把“幻觉”归罪于AI技术本身,更不能因噎废食。相反,正因为目前AI技术存在包括“幻觉”等不成熟的技术问题,我们才要更多地使用和训练它,让它变得更加成熟,更好地为人类服务。

  另外,治理AI“幻觉”也离不开法治的护航。对此,王锡锌表示,用法治治理AI“幻觉”的关键是把“技术不可根治”难题转化为“规则可验证、责任可追溯”。他建议,一方面要加快建立强制标识与可追溯标准,运用显性及隐性标识、元数据留痕与跨平台识别等技术手段降低误认与扩散风险。另一方面,要建立分类分级监管。比如,设立注意义务的分层标准,对违法有害信息“严格审查”,对一般错误信息以“显著提示+纠错机制”为核心,形成可操作的“注意义务清单”。针对AI在教育、医疗、金融、司法等场景可能存在的使用风险,平台及有关各方应制定更严的事实核验、人工复核与禁用边界。唯有构建起明晰的权责边界,才能引导AI产业在规范中创新发展,让技术红利更多惠及千家万户。

  策划:车玉明 刘加文 肖阳

  执行策划:唐心怡

  统筹:杨柳 张琦

  编辑:马宇聪

  设计:李权 田粟

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
文章开饭店引关注,其新开饭店商标已注册成功

文章开饭店引关注,其新开饭店商标已注册成功

潇湘晨报
2026-04-10 11:06:14
白宫打击伊朗决策内幕:拆解以方四步计划,CIA局长说“荒谬” 鲁比奥称“乱扯”

白宫打击伊朗决策内幕:拆解以方四步计划,CIA局长说“荒谬” 鲁比奥称“乱扯”

红星新闻
2026-04-09 18:24:30
痛心!湖南2人骑车过江身亡,最后求救太绝望,旁人死活拦不住!

痛心!湖南2人骑车过江身亡,最后求救太绝望,旁人死活拦不住!

川渝视觉
2026-04-09 14:20:36
1962年126名印度士兵在弹尽粮绝后,抽出弯刀直面解放军的三棱刺

1962年126名印度士兵在弹尽粮绝后,抽出弯刀直面解放军的三棱刺

鉴史录
2026-04-09 20:20:34
杨子新女友,不如黄圣依!

杨子新女友,不如黄圣依!

可乐谈情感
2026-04-10 02:48:03
家里有地的注意了!5月起,农村承包土地一律按新规来!

家里有地的注意了!5月起,农村承包土地一律按新规来!

小谈食刻美食
2026-04-10 07:31:27
广东早报3消息!萨林杰或复出,关辛透露大外进展,金主力挺杜锋

广东早报3消息!萨林杰或复出,关辛透露大外进展,金主力挺杜锋

飞克体育
2026-04-10 10:09:04
斯诺克赛程:决出8席80强,常冰玉领衔,中国10人登场,2场德比战

斯诺克赛程:决出8席80强,常冰玉领衔,中国10人登场,2场德比战

刘姚尧的文字城堡
2026-04-10 09:03:55
别再用现金行贿受贿了!大数据一查就现形,全程 “裸奔” 藏不住

别再用现金行贿受贿了!大数据一查就现形,全程 “裸奔” 藏不住

复转这些年
2026-02-09 23:45:54
10年内入狱2次,爆火后“包一晚”40万,如今的她过得怎么样?

10年内入狱2次,爆火后“包一晚”40万,如今的她过得怎么样?

宝哥精彩赛事
2026-04-07 15:43:13
斯波尔斯特拉坦诚回应热火连续第四年无缘附加赛:当然很失望

斯波尔斯特拉坦诚回应热火连续第四年无缘附加赛:当然很失望

好火子
2026-04-10 05:54:09
令人惊讶!那些喜欢嫖娼的男性,竟在某些方面存在这几个共同特征

令人惊讶!那些喜欢嫖娼的男性,竟在某些方面存在这几个共同特征

皓皓情感说
2026-04-07 23:33:28
吃完了宴席,两岸在上海谈妥,对赖清德改了称呼,郑丽文一锤定音

吃完了宴席,两岸在上海谈妥,对赖清德改了称呼,郑丽文一锤定音

共工之锚
2026-04-10 01:23:23
上半年北京小客车指标资格审核结果公布,无车家庭积分本月发布

上半年北京小客车指标资格审核结果公布,无车家庭积分本月发布

新京报
2026-04-09 14:20:06
斯皮尔伯格花1年打磨《星际穿越》,却在开拍前把剧本塞给了诺兰

斯皮尔伯格花1年打磨《星际穿越》,却在开拍前把剧本塞给了诺兰

影视情报室
2026-04-10 08:14:32
李斌谈ES9汽车设计:原创艰难也必须做 不能活在别人的影子里

李斌谈ES9汽车设计:原创艰难也必须做 不能活在别人的影子里

快科技
2026-04-09 15:54:12
今夜合肥市民减少不必要驾车出行

今夜合肥市民减少不必要驾车出行

娱乐圈的笔娱君
2026-04-10 03:01:58
超越台积电!Intel重磅官宣:加入马斯克全球最大2nm晶圆工厂 颠覆芯片制造

超越台积电!Intel重磅官宣:加入马斯克全球最大2nm晶圆工厂 颠覆芯片制造

快科技
2026-04-08 12:30:28
深思:张雪推荐买豪爵!而电动车行业的抄袭、诽谤和举报现象盛行

深思:张雪推荐买豪爵!而电动车行业的抄袭、诽谤和举报现象盛行

电动车行业观察员
2026-04-09 10:46:40
张雪从凯越离开 33 字离职信意外走红!网友:天马行空又锋芒毕露……

张雪从凯越离开 33 字离职信意外走红!网友:天马行空又锋芒毕露……

互联网思维
2026-04-08 23:34:35
2026-04-10 12:03:00
新华社 incentive-icons
新华社
新华社是国家通讯社
666963文章数 2431278关注度
往期回顾 全部

科技要闻

程序员惊喜,每月100美元!OpenAI推新套餐

头条要闻

牛弹琴:巴基斯坦被以色列激怒了 这是一个不祥的信号

头条要闻

牛弹琴:巴基斯坦被以色列激怒了 这是一个不祥的信号

体育要闻

17岁赚了一百万美元,25岁被CBA裁员

娱乐要闻

夏克立婚内出轨 曾参加《爸爸去哪儿》

财经要闻

爱尔眼科一院长被指猥亵 总部:已被停职

汽车要闻

全新一代理想 L8 五座旗舰+5C增程系统 三季度交付

态度原创

教育
数码
本地
艺术
军事航空

教育要闻

五部门:加快普及中小学生的人工智能教育

数码要闻

REDMI Book Pro 2026官宣本月发布:酷睿Ultra X7 358H+99Wh巨无霸电池

本地新闻

12吨巧克力有难,全网化身超级侦探添乱

艺术要闻

于小冬2026年4月油画新作《花季》

军事要闻

黎真主党发射火箭弹 回应以违反停火协议

无障碍浏览 进入关怀版