网易首页 > 网易号 > 正文 申请入驻

AI幻觉如何防范和治理?这场圆桌沙龙谈到人防、技防等措施

0
分享至

“人工智能的三驾马车是数据、算力、算法,源头还是数据,现在互联网上的语料五花八门、鱼龙混杂,数据如果本身不干净,再加上算法和机制的问题,就导致AI幻觉产生。” 11月28日,2025中国报业传媒行业人工智能应用大会在沪举办,上海市信息安全测评认证中心总工程师李宏达在圆桌沙龙环节表示。

本场圆桌沙龙的主题是《AI的幻觉、伦理、法理与治理》,围绕AI为什么会产生幻觉、如何防范和治理AI幻觉,与会者谈了自己的看法。

11月28日,2025中国报业传媒行业人工智能应用大会在沪举办,图为圆桌沙龙。 澎湃新闻记者 朱伟辉 摄

澎湃新闻·明查工作室主理人李怡清表示,AI幻觉其实就是AI生成过程中带来的虚假信息或者具有误导性的信息,公众媒介素养的培育、AI素养的培育、对于已经产生误导的信息进行事实核查并将其展示在公众面向,是必不可少的流程。

复旦大学人工智能创新与产业研究院研究员、博士生导师朱思语表示,对于大模型来讲,训练模式是侧重于对大量数据的压缩,数据里面有错误,让训练后的模型产生的结果不一定准确,有些时候甚至会为了讨好人类胡说八道,产生AI幻觉。

如何兼顾安全和隐私保护?与会者提出了人防和技防等措施。

安永大中华区网络安全与隐私保护咨询服务合伙人夏文婷表示,避免AI产生幻觉,好的数据源很重要,可以起到正本清源的作用。传媒行业作为公信力承载者,有动力和义务帮助用户了解什么样的内容可能是AI生成的、AI生成到什么程度,做好这一轮AI素养教育。

上海人工智能研究院首席数字官、技术与创新中心主任林圆圆指出,技术方、内容生产方、平台方、内容消费者这四个角色都有责任和义务保证对应的内容生产和消费是安全的。其中,内容生产者是链条关键的一环,需要保证生产的内容信源完全准确,内容里使用什么样的AI能力、产出了哪部分内容,也需要有对应说明;平台方有责任和义务做好内容核查、抽审;终端消费者也要注意甄辨事实到底是什么样的,而不是人云亦云随大流。

李宏达表示,今年《人工智能生成合成内容标识办法》发布,主要涉及哪些是可以生成、在哪生成、谁生成的,要打显标和隐标。显标就是提醒受众这是AI生成的,隐标打在数据原文件里面,一旦虚假信息传播,便于完成追溯。从监管角度来说,标识生成、传播验证到最后的溯源追责都形成了闭环。上海市信息安全测评认证中心也一直在支持标识检查等相关工作。

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
同济大学全体关切公平的教师致杨金龙校长公开信

同济大学全体关切公平的教师致杨金龙校长公开信

紫京讲谈
2026-08-10 16:49:29
马卡报:西班牙女演员爆料,巴拉圭女商人曾与C罗相恋两年

马卡报:西班牙女演员爆料,巴拉圭女商人曾与C罗相恋两年

懂球帝
2026-08-10 19:07:07
河南警方:网民在涉西平“7·30”命案短视频评论区留言,称“当地人都知道干死了五个人”,编造虚假伤亡信息,被行政处罚

河南警方:网民在涉西平“7·30”命案短视频评论区留言,称“当地人都知道干死了五个人”,编造虚假伤亡信息,被行政处罚

极目新闻
2026-08-10 11:50:22
百花奖颁奖:卫诗雅爆冷夺影后,易烊千玺成双料影帝,王骁萨日娜实至名归

百花奖颁奖:卫诗雅爆冷夺影后,易烊千玺成双料影帝,王骁萨日娜实至名归

露珠聊影视
2026-08-10 23:23:17
为演《战神》练到二头肌撕裂,Ryan Hurst一张自拍胜过官方海报

为演《战神》练到二头肌撕裂,Ryan Hurst一张自拍胜过官方海报

自愈小日子
2026-08-11 00:30:14
演员贾冰,全网可怜!

演员贾冰,全网可怜!

新动察
2026-08-10 15:29:10
女子花3万购宝鸡40平米住房引关注 本人:已过户超一年,装修花4万多 中介称确有外地人来买“万元房”

女子花3万购宝鸡40平米住房引关注 本人:已过户超一年,装修花4万多 中介称确有外地人来买“万元房”

红星新闻
2026-08-10 23:09:24
独闯南太行失联14天女子不幸身亡 当地村民:挖野菜在崖顶发现背包,救援人员在崖底找到其遗体

独闯南太行失联14天女子不幸身亡 当地村民:挖野菜在崖顶发现背包,救援人员在崖底找到其遗体

红星新闻
2026-08-10 16:27:13
无人机如何催生了俄罗斯坦克的变革

无人机如何催生了俄罗斯坦克的变革

枢密院十号
2026-08-10 18:17:40
高铁连播寻医却无人起身?三甲主任连拒三次,医生怕的到底是什么

高铁连播寻医却无人起身?三甲主任连拒三次,医生怕的到底是什么

社会日日鲜
2026-08-10 06:46:17
马斯克要用自由电子激光干翻EUV:不是疯了,是ASML的路走死了

马斯克要用自由电子激光干翻EUV:不是疯了,是ASML的路走死了

阿纂看事
2026-08-10 14:43:20
塞尔维亚总统武契奇明确表示:“欧洲已处于大战边缘”,乌克兰冲突短期内无法到解决,欧洲不要试图在乌克兰冲突中从战略上打败俄罗斯

塞尔维亚总统武契奇明确表示:“欧洲已处于大战边缘”,乌克兰冲突短期内无法到解决,欧洲不要试图在乌克兰冲突中从战略上打败俄罗斯

吉刻新闻
2026-08-10 11:39:46
最敏感时刻,伊朗知名“野心家”上位了

最敏感时刻,伊朗知名“野心家”上位了

中国新闻周刊
2026-08-10 19:10:28
豆包推荐酒店抽取12%佣金?多家酒店回应

豆包推荐酒店抽取12%佣金?多家酒店回应

界面新闻
2026-08-10 21:36:43
拍完新龙门客栈,梁家辉对张曼玉说:以后除了拍戏,咱俩别联系,这样对你我都好

拍完新龙门客栈,梁家辉对张曼玉说:以后除了拍戏,咱俩别联系,这样对你我都好

草莓解说体育
2026-08-10 16:30:35
摊牌了!伊朗首次公开承认:正在研发核弹,美以弃核伊朗才会弃核

摊牌了!伊朗首次公开承认:正在研发核弹,美以弃核伊朗才会弃核

面包夹知识
2026-08-06 21:12:37
易烊千玺凭借《小小的我》获得第38届百花奖最佳男主角,卫诗雅凭借《破·地狱》拿下最佳女主角奖

易烊千玺凭借《小小的我》获得第38届百花奖最佳男主角,卫诗雅凭借《破·地狱》拿下最佳女主角奖

极目新闻
2026-08-10 21:35:37
泪目!程梦圆遗体200米崖底找到,村民透露更多,疑似死因曝光

泪目!程梦圆遗体200米崖底找到,村民透露更多,疑似死因曝光

追踪之点
2026-08-10 23:39:13
网友称甘肃麦积山景区看完所有石窟需2000元,景区:部分石窟受特别保护,游客可按需买

网友称甘肃麦积山景区看完所有石窟需2000元,景区:部分石窟受特别保护,游客可按需买

北青网-北京青年报
2026-08-09 18:48:03
河南失联女孩亲哥曝猛料!独闯南太行另有隐情,不然不会连去3次

河南失联女孩亲哥曝猛料!独闯南太行另有隐情,不然不会连去3次

大鱼简科
2026-08-10 16:49:19
2026-08-11 07:20:49
澎湃新闻 incentive-icons
澎湃新闻
专注时政与思想的新闻平台。
922308文章数 5094979关注度
往期回顾 全部

科技要闻

马斯克又放大招:星链要吃掉全球一半流量

头条要闻

16岁少年强行抱女友跳河自杀 自己爬上岸放任女友溺亡

头条要闻

16岁少年强行抱女友跳河自杀 自己爬上岸放任女友溺亡

体育要闻

阿森纳的39号球衣,有了最适合的主人

娱乐要闻

演员秦焰去世 享年72岁

财经要闻

最多卖166亿港元,李嘉诚又要套现了

汽车要闻

搭载猎鹰500/限时售10.49万起 2027款艾瑞泽8PRO上市

态度原创

房产
教育
旅游
公开课
军事航空

房产要闻

海南最难被说服的一群人,把15亿投给了同一个项目!

教育要闻

养儿子,别只惯他,要教他扛事,这十句话,从小就跟他说透,他这辈子绝差不到哪儿去

旅游要闻

大美芦芽山·宁化古城文化旅游季暨短视频大赛正式启幕

公开课

李玫瑾:为什么性格比能力更重要?

军事要闻

特朗普被指不想再打了:哪怕未达成核协议也想退出

无障碍浏览 进入关怀版