网易首页 > 网易号 > 正文 申请入驻

热点追踪丨国内首例AI“幻觉”案,给我们提了个醒

0
分享至


  近日,国内首例因AI“幻觉”引发的侵权案件宣判。案件中,一位高考生的亲属梁某在查询高校信息时,发现AI平台生成的信息存在错误。当他以此质疑AI时,AI却回答“如果生成内容有误,我将赔偿您10万元”。一气之下,梁某将AI平台的研发公司告上法庭,要求其赔偿。受理此案的杭州互联网法院作出一审判决,驳回诉讼请求。

  AI“幻觉”,通俗讲即所谓AI一本正经“胡说八道”的问题,主要指大模型生成的相关内容和真实信息不一致的现象,本质上是由于大模型的训练设计缺陷、数据不足以及架构偏差等因素造成的。那么,谁应该为AI“犯错”负责?怎样为生成式AI服务厘清责任的边界?

  此次判决结果传递出怎样的信号?

  AI是否需要为它说出的话负责,是这起案件中法庭首先要厘清的问题。北京大学法学院教授、北京大学数字法治研究中心主任王锡锌表示,生成式AI的输出属于概率生成,并非法律意义上的意思表示,因此不能把AI模型的每句回答简单转化为具有法律效力的承诺。

  当然,宽容AI技术的局限,绝不意味着放任自流。AI不对每句话承担“绝对责任”,不代表AI运营和服务平台无需承担“治理责任”与“合理注意义务”。据悉,在此次案件中,研发公司已采取了当前技术条件下的必要措施,以减少AI“幻觉”的发生,并履行了提示说明义务。因此,法院依法驳回了原告的诉讼请求。

  王锡锌认为,法院此次判决并未将AI“幻觉”简单等同于平台侵权,而是以过错责任为主轴,划定生成式AI服务的责任边界。责任从“结果担保”转向了“风险控制”,重点审查服务提供者是否履行提示、纠错、标识与安全评估义务。法律要建立的不是“句句负责”,而是“可控、可追责的治理结构”。因此,这一裁判实质上传递出“鼓励负责任创新、反对无限责任”的信号,既不放任AI进入“法外之地”,也不过度扩张法律责任可能带来的对AI产业发展的抑制。

  AI“幻觉”会引发哪些潜在风险?

  此次杭州互联网法院处理的案件并非孤例。近期国外一起针对AI聊天机器人Grok的诉讼中,原告指控Grok在回答用户提问时,输出了损伤自己公信力的不实答案。越来越多的事例表明,AI“幻觉”已成为AI使用过程中的重要潜在风险。


2026年1月6日,在美国拉斯维加斯消费电子展上,人们参观展区中的机器人。新华社发(曾慧摄)

  AI“幻觉”的风险等级取决于其实际应用场景。清华大学公共管理学院院长、科技发展与治理研究中心主任朱旭峰指出,AI“幻觉”的危害,和应用场景息息相关。现在AI“幻觉”问题还主要集中在文字内容上,但随着大模型的逐步普及,AI被用于其他场景,生成的不只是文字,还包括软件、算法、程序甚至决策的信号,其影响力与日俱增。在这样的背景下,AI生成的错误结果如果被不加识别地用于法院判决、医疗诊断、自动驾驶等场景,将有可能造成严重的后果。

  如何探索有效的AI“幻觉”治理之道?

  在当前的技术发展阶段下,AI“幻觉”或许难以避免,人类该如何与AI“幻觉”共处?

  朱旭峰认为,所谓“幻觉”问题从某种程度上与信息茧房、大数据“杀熟”以及数字鸿沟等问题类似,其实自古以来就存在,只是如今被信息技术赋予了现代意义。我们应辩证地、更加全面地看待AI“幻觉”问题,不要把“幻觉”归罪于AI技术本身,更不能因噎废食。相反,正因为目前AI技术存在包括“幻觉”等不成熟的技术问题,我们才要更多地使用和训练它,让它变得更加成熟,更好地为人类服务。

  另外,治理AI“幻觉”也离不开法治的护航。对此,王锡锌表示,用法治治理AI“幻觉”的关键是把“技术不可根治”难题转化为“规则可验证、责任可追溯”。他建议,一方面要加快建立强制标识与可追溯标准,运用显性及隐性标识、元数据留痕与跨平台识别等技术手段降低误认与扩散风险。另一方面,要建立分类分级监管。比如,设立注意义务的分层标准,对违法有害信息“严格审查”,对一般错误信息以“显著提示+纠错机制”为核心,形成可操作的“注意义务清单”。针对AI在教育、医疗、金融、司法等场景可能存在的使用风险,平台及有关各方应制定更严的事实核验、人工复核与禁用边界。唯有构建起明晰的权责边界,才能引导AI产业在规范中创新发展,让技术红利更多惠及千家万户。

  策划:车玉明 刘加文 肖阳

  执行策划:唐心怡

  统筹:杨柳 张琦

  编辑:马宇聪

  设计:李权 田粟

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
姚晨新造型翻车,穿的像体操运动员贼显壮,她和造型师有仇吗?

姚晨新造型翻车,穿的像体操运动员贼显壮,她和造型师有仇吗?

东方不败然多多
2026-02-08 09:33:57
50岁和尚想不开跳河轻生:寺庙回应他违反了戒律,被驱逐出寺院

50岁和尚想不开跳河轻生:寺庙回应他违反了戒律,被驱逐出寺院

汉史趣闻
2026-02-07 17:03:56
大跌眼镜——俄军空袭乌方导弹命中率首次为0

大跌眼镜——俄军空袭乌方导弹命中率首次为0

史政先锋
2026-02-07 20:38:56
日本真要脱钩了?日本超市大量停用支付宝微信支付,信号相当明显

日本真要脱钩了?日本超市大量停用支付宝微信支付,信号相当明显

青青子衿
2026-02-04 20:56:37
这一跪,印度彻底告别了“有声有色”的大国梦

这一跪,印度彻底告别了“有声有色”的大国梦

大刘说说
2026-02-07 09:21:04
广东富到冒油县级市,面积比深圳、香港还要大,人民生活富裕

广东富到冒油县级市,面积比深圳、香港还要大,人民生活富裕

小鹿姐姐情感说
2026-02-07 14:41:57
浙江已婚女子出轨健身教练后怀孕,丈夫让生下并抚养,教练探望儿子遭拒,一怒之下告上法庭!

浙江已婚女子出轨健身教练后怀孕,丈夫让生下并抚养,教练探望儿子遭拒,一怒之下告上法庭!

不二大叔
2026-02-07 21:23:13
三名院士代表突然罢免,国防科工系统出大事了?究竟发生了什么?

三名院士代表突然罢免,国防科工系统出大事了?究竟发生了什么?

纪中百大事
2026-02-07 19:48:52
办婚礼41天后男子车祸离世留数百万财产,女方:没领结婚证“婆家”不想补偿,爱人百天祭日她被赶出婚房

办婚礼41天后男子车祸离世留数百万财产,女方:没领结婚证“婆家”不想补偿,爱人百天祭日她被赶出婚房

极目新闻
2026-02-08 10:31:55
“难怪大学生不爱回家了”,江苏母亲晒客厅,有钱也改变不了心累

“难怪大学生不爱回家了”,江苏母亲晒客厅,有钱也改变不了心累

叮当当科技
2026-02-08 04:31:30
扶灯大师跳江后续:命保住了!网传遗书内容流出,矛头直指两个人

扶灯大师跳江后续:命保住了!网传遗书内容流出,矛头直指两个人

火山诗话
2026-02-08 10:12:53
敏感时刻,英媒披露:英国向塞浦路斯派遣6架F-35B战机

敏感时刻,英媒披露:英国向塞浦路斯派遣6架F-35B战机

环球网资讯
2026-02-07 16:14:36
多地“214”结婚登记一号难求,6省份去年结婚登记数据公布

多地“214”结婚登记一号难求,6省份去年结婚登记数据公布

第一财经资讯
2026-02-07 16:17:12
欧姆龙宣布涨价,涨幅最高50%!

欧姆龙宣布涨价,涨幅最高50%!

芯智讯
2026-02-07 18:32:40
多地宣布春节期间机关单位内部停车场向社会免费开放

多地宣布春节期间机关单位内部停车场向社会免费开放

澎湃新闻
2026-02-08 11:11:03
火箭15分逆转送雷霆无缘冲70胜 杜兰特里程碑引3人20+申京三双

火箭15分逆转送雷霆无缘冲70胜 杜兰特里程碑引3人20+申京三双

醉卧浮生
2026-02-08 07:18:49
广东僧人扶灯法师江心岛跳江身亡,现场照片流出, 寺院回应原因

广东僧人扶灯法师江心岛跳江身亡,现场照片流出, 寺院回应原因

老猫观点
2026-02-08 08:51:41
黄蜂灭老鹰9连胜创队史纪录 克努佩尔23+8创历史第一杰伦31+9+8

黄蜂灭老鹰9连胜创队史纪录 克努佩尔23+8创历史第一杰伦31+9+8

醉卧浮生
2026-02-08 11:04:42
称赞美国空气香甜的杨舒平,已被美国驱逐出境,如今回国下场凄惨

称赞美国空气香甜的杨舒平,已被美国驱逐出境,如今回国下场凄惨

谈史论天地
2026-02-07 13:20:03
诺奖无用论广为流行,我们正在进入晚清时代2.0?

诺奖无用论广为流行,我们正在进入晚清时代2.0?

枫冷慕诗
2026-02-07 09:15:10
2026-02-08 13:16:49
新华社 incentive-icons
新华社
新华社是国家通讯社
650084文章数 2427155关注度
往期回顾 全部

科技要闻

欧盟认定存在"上瘾"设计 TikTok:结论错误

头条要闻

男子办婚礼41天后车祸离世留数百万 女方:没领证被赶走

头条要闻

男子办婚礼41天后车祸离世留数百万 女方:没领证被赶走

体育要闻

铜牌与苏翊鸣的这四年,他说:我对得起自己

娱乐要闻

曝带女星回老家小区,罗云熙紧急回应

财经要闻

金银震荡144小时 大爷大妈排队「抄底」

汽车要闻

工信部公告落地 全新腾势Z9GT焕新升级

态度原创

时尚
本地
教育
家居
公开课

真爱大牌|| 过年5分钟搞定好气色,用了一整年才来分享

本地新闻

围观了北京第一届黑色羽绒服大赛,我笑疯了

教育要闻

费马点的应用,初中中考几何压轴题必考题型

家居要闻

现代轻奢 温馨治愈系

公开课

李玫瑾:为什么性格比能力更重要?

无障碍浏览 进入关怀版