网易首页 > 网易号 > 正文 申请入驻

AI幻觉如何防范和治理?这场圆桌沙龙谈到人防、技防等措施

0
分享至

“人工智能的三驾马车是数据、算力、算法,源头还是数据,现在互联网上的语料五花八门、鱼龙混杂,数据如果本身不干净,再加上算法和机制的问题,就导致AI幻觉产生。” 11月28日,2025中国报业传媒行业人工智能应用大会在沪举办,上海市信息安全测评认证中心总工程师李宏达在圆桌沙龙环节表示。

本场圆桌沙龙的主题是《AI的幻觉、伦理、法理与治理》,围绕AI为什么会产生幻觉、如何防范和治理AI幻觉,与会者谈了自己的看法。

11月28日,2025中国报业传媒行业人工智能应用大会在沪举办,图为圆桌沙龙。 澎湃新闻记者 朱伟辉 摄

澎湃新闻·明查工作室主理人李怡清表示,AI幻觉其实就是AI生成过程中带来的虚假信息或者具有误导性的信息,公众媒介素养的培育、AI素养的培育、对于已经产生误导的信息进行事实核查并将其展示在公众面向,是必不可少的流程。

复旦大学人工智能创新与产业研究院研究员、博士生导师朱思语表示,对于大模型来讲,训练模式是侧重于对大量数据的压缩,数据里面有错误,让训练后的模型产生的结果不一定准确,有些时候甚至会为了讨好人类胡说八道,产生AI幻觉。

如何兼顾安全和隐私保护?与会者提出了人防和技防等措施。

安永大中华区网络安全与隐私保护咨询服务合伙人夏文婷表示,避免AI产生幻觉,好的数据源很重要,可以起到正本清源的作用。传媒行业作为公信力承载者,有动力和义务帮助用户了解什么样的内容可能是AI生成的、AI生成到什么程度,做好这一轮AI素养教育。

上海人工智能研究院首席数字官、技术与创新中心主任林圆圆指出,技术方、内容生产方、平台方、内容消费者这四个角色都有责任和义务保证对应的内容生产和消费是安全的。其中,内容生产者是链条关键的一环,需要保证生产的内容信源完全准确,内容里使用什么样的AI能力、产出了哪部分内容,也需要有对应说明;平台方有责任和义务做好内容核查、抽审;终端消费者也要注意甄辨事实到底是什么样的,而不是人云亦云随大流。

李宏达表示,今年《人工智能生成合成内容标识办法》发布,主要涉及哪些是可以生成、在哪生成、谁生成的,要打显标和隐标。显标就是提醒受众这是AI生成的,隐标打在数据原文件里面,一旦虚假信息传播,便于完成追溯。从监管角度来说,标识生成、传播验证到最后的溯源追责都形成了闭环。上海市信息安全测评认证中心也一直在支持标识检查等相关工作。

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
19岁全红婵久违现身!瘦了一圈+下巴尖了 吃汉堡薯条火锅 喝冰可乐

19岁全红婵久违现身!瘦了一圈+下巴尖了 吃汉堡薯条火锅 喝冰可乐

阿废冷眼观察所
2026-06-25 15:15:43
癌症是基因注定的,躲也躲不掉?父母得了5种癌,或遗传给下一代

癌症是基因注定的,躲也躲不掉?父母得了5种癌,或遗传给下一代

39健康网
2026-06-25 08:30:42
1.3亿镑创纪录!曼城将再谈安德森转会

1.3亿镑创纪录!曼城将再谈安德森转会

坠入温柔晚风
2026-06-25 00:12:59
巴西3-0大胜,7分锁定小组榜首,却高兴不起来,决赛或将迎战日本

巴西3-0大胜,7分锁定小组榜首,却高兴不起来,决赛或将迎战日本

历史胶囊
2026-06-25 10:20:34
韩国队运气爆棚!拿第2,1/16决赛PK加拿大,孙兴慜进16强容易了

韩国队运气爆棚!拿第2,1/16决赛PK加拿大,孙兴慜进16强容易了

何老师呀
2026-06-25 07:11:51
湖南失联多日13岁男孩被找到:落入被草掩盖的坑洞,疑靠喝水存活,身体状况良好

湖南失联多日13岁男孩被找到:落入被草掩盖的坑洞,疑靠喝水存活,身体状况良好

大象新闻
2026-06-25 20:50:37
为省钱,日本711便利店等商家推出“无海苔饭团”,产品仅保留米饭和馅料,包装改为黑白灰三色,不再提供双层包装

为省钱,日本711便利店等商家推出“无海苔饭团”,产品仅保留米饭和馅料,包装改为黑白灰三色,不再提供双层包装

中国能源网
2026-06-25 18:46:04
看到一个黑影在横穿马路,本以为是只大狗……走近一看才发现:居然是半只鳄鱼!

看到一个黑影在横穿马路,本以为是只大狗……走近一看才发现:居然是半只鳄鱼!

爱宠物
2026-06-24 01:44:44
六根阴毛定死缓,男子蒙冤二十载出狱,杀害母子三人的真凶是谁?

六根阴毛定死缓,男子蒙冤二十载出狱,杀害母子三人的真凶是谁?

易玄
2026-06-25 11:51:23
麦当娜拒做“体面奶奶”,68岁偏要混夜店气死谁

麦当娜拒做“体面奶奶”,68岁偏要混夜店气死谁

影视情报室
2026-06-25 00:14:34
中纪委2026年“放大招”!严查四类人!伸过手的一个都跑不了!

中纪委2026年“放大招”!严查四类人!伸过手的一个都跑不了!

职场资深秘书
2026-06-24 16:34:33
央视警告!日本囤弹药备战台海,要是非要打,中国就能一劳永逸了

央视警告!日本囤弹药备战台海,要是非要打,中国就能一劳永逸了

寄予的清风
2026-06-25 10:50:09
据爆料:听说某大厂西安研究所一个女员工,终身合同耗了三年不走,今年被hr带着保安抬出公司了。

据爆料:听说某大厂西安研究所一个女员工,终身合同耗了三年不走,今年被hr带着保安抬出公司了。

纯洁的微笑
2026-06-25 12:49:08
提前爆发?梅根与凯特王妃在英国撞期,两妯娌将在同一天亮相

提前爆发?梅根与凯特王妃在英国撞期,两妯娌将在同一天亮相

聪明的橙子hj
2026-06-24 15:31:42
中纪委再出大招!公务员这4类行为将被大数据盯死,沾上就完蛋!

中纪委再出大招!公务员这4类行为将被大数据盯死,沾上就完蛋!

职场资深秘书
2026-06-25 19:40:04
你们都是什么时候对男女之事开窍的?网友:果然还是拦不住有心人

你们都是什么时候对男女之事开窍的?网友:果然还是拦不住有心人

夜深爱杂谈
2026-02-21 21:37:02
中国灵活就业者突破3.2亿大关,占就业人口比例高达44%。

中国灵活就业者突破3.2亿大关,占就业人口比例高达44%。

流苏晚晴
2026-06-13 18:21:18
何超盈罕见度假照曝光!闺蜜林心儿发合影,这次她终于点头了

何超盈罕见度假照曝光!闺蜜林心儿发合影,这次她终于点头了

川川八卦说
2026-06-24 11:53:50
事态再升级!一句话蒸发3000万票房,韩红晚节不保,冯小刚遭牵连

事态再升级!一句话蒸发3000万票房,韩红晚节不保,冯小刚遭牵连

秋姐居
2026-06-23 19:28:52
76岁希拉里传跨界绯闻?对象是49岁莱昂纳多,游艇同框是算计?

76岁希拉里传跨界绯闻?对象是49岁莱昂纳多,游艇同框是算计?

绿茵八卦君
2026-06-20 19:45:04
2026-06-26 01:43:00
澎湃新闻 incentive-icons
澎湃新闻
专注时政与思想的新闻平台。
910290文章数 5093043关注度
往期回顾 全部

科技要闻

存储成本压力山大!苹果罕见全球提价

头条要闻

佛得角震撼世界足坛 佛得角足协给中国男足支招

头条要闻

佛得角震撼世界足坛 佛得角足协给中国男足支招

体育要闻

世界杯最动人一吻:我若离世 你就改嫁吧

娱乐要闻

这国产剧太装了,居然还热播第一?

财经要闻

又有纸尿裤送检后被检测出甲酰胺!

汽车要闻

老板们的新座驾!65万元起,尊界V800/V680开启预订

态度原创

时尚
旅游
房产
教育
公开课

女人不管多大年纪,夏天都要准备一两条过膝裙,舒适又提气质

旅游要闻

人生第一次去巴黎,最难忘的竟然是扫墓

房产要闻

城市精英集体出手!科学城这一现象级热销红盘,凭何成为共识之选?

教育要闻

这是南京什么神仙学校?高分学子扎堆!

公开课

李玫瑾:为什么性格比能力更重要?

无障碍浏览 进入关怀版