网易首页 > 网易号 > 正文 申请入驻

为AI幻觉、沉迷乱象支招!首个AI应用伦理安全指引发布

0
分享至


让AI帮忙订机票却被幻觉所“骗”,受被“投毒”过的AI推荐购买虚假口碑产品,沉迷于与AI聊天逃避现实生活……近年来人工智能不断加速发展,深刻地改变社会运行及个人生活方式的同时,也带来许多伦理安全挑战。针对AI应用乱象,近日全国网络安全标准化技术委员会发布了《人工智能应用伦理安全指引1.0》(下称《指引》),进一步为完善我国人工智能安全治理体系“添砖加瓦”。

南都记者注意到,《指引》起草单位包括清华大学、中国电子技术标准化研究院、上海交通大学、四川大学、北京科技大学、阿里巴巴集团、华为技术有限公司、北京深度求索人工智能基础技术研究有限公司等。该文件性质上为原则性、参考性技术文件,通过提出人工智能应用伦理安全理念与原则,为组织和个人开展人工智能应用活动提供指导等。

《指引》认为,人工智能应用伦理安全影响主要包括六类。从群体层面看,当人工智能行为超出人类所预设、理解和可控的范围,在对人工智能应用关键节点的监督、干预与纠偏不足时,可能冲击人类在社会运行和治理过程中的主导地位。从社会层面看,当人工智能应用于社会运行和行为决策,在技术快速演化而社会回馈相对缓慢的情况下,可能影响行为规范、市场秩序与社会信任,最终对社会基础公共秩序带来冲击。从个人层面看,人工智能普遍应用形成的新社会环境可能对个体认知与社会价值体系带来冲击,产生人类过度依赖、个体与现实社会脱节等问题。

《指引》从应用开发、服务提供、应用使用三个层面给出安全指引。针对公众感知度较高的AI“幻觉”问题,文件提出应理性认知人工智能应用的技术能力边界与潜力,对缺乏依据或者存在较大不确定性的输出作出必要管控以及提示说明。另外要打破AI技术“黑箱”,在技术可行、符合业界普遍技术水平的前提下,提高开发过程透明度,结合人工智能应用场景和影响程度等方面,制定并提供安全配置、安全部署的操作指南,及时、准确、完整对外说明人工智能应用的功能、局限、安全风险和可能的影响。

在服务提供过程中,《指引》强调,应提供符合科技伦理审查要求的产品或应用,加强人工智能应用全生命周期的跟踪审查。服务涉及国家安全、社会公共权益、组织和个人重大生命财产安全时,人工智能宜仅承担辅助决策作用、不提供直接决策依据。在设置应急处置机制方面,应持续监控服务运行过程,主动识别发现伦理安全风险,及时处置伦理安全问题,确保合法合规应用,必要时采取人工紧急干预、中止应用等手段。

AI发展为生活带来了极大便利,也对人们的科技认知及素养提出了更高要求。《指引》提出正确认知人工智能,学习人工智能伦理安全基本知识,增强对虚假、错误、误导性内容的识别能力,增强对人工智能相关物理安全风险、决策安全风险的认识,形成理性、审慎的使用习惯。同时,不借助人工智能对他人进行误导、骚扰、操纵,不利用人工智能伪造、冒用他人身份或仿冒权威主体等。在使用以人工智能作为辅助真实生活的工具时,避免过度依赖、过度沉迷,避免通过人工智能过多替代现实交往与真实活动。

中国电子技术标准化研究院副院长范科峰撰文提到,《指引》将伦理安全原则进一步转化为开发有遵循、服务有规范、使用有边界的应用指引。此举既有利于推动相关主体在各自环节履行相应责任,也有利于促进应用开发、服务提供和应用使用之间形成衔接配合。未来建议以《指引》发布实施为契机,围绕重点行业、场景和主体,持续完善配套标准、实践指南、评估方法和典型案例等。

采写:南都N视频记者 樊文扬

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
45岁守山人遭巨豹跟踪9天,绝望看清它嘴里之物,他瘫在树下大哭

45岁守山人遭巨豹跟踪9天,绝望看清它嘴里之物,他瘫在树下大哭

白云故事
2026-03-14 19:50:07
耿同学抖音账号,已被永久限流!中南大学湘雅医学院回应论文造假:已要求课题组提交原始数据

耿同学抖音账号,已被永久限流!中南大学湘雅医学院回应论文造假:已要求课题组提交原始数据

TOP大学来了
2026-05-30 19:02:11
A股,盘中巨震!

A股,盘中巨震!

证券时报
2026-06-02 11:02:04
阿尔瓦雷斯走定了 西媒称合同有1.2亿欧条款 巴黎更有机会引进

阿尔瓦雷斯走定了 西媒称合同有1.2亿欧条款 巴黎更有机会引进

智道足球
2026-06-02 11:44:52
因为没钱,社会上已经出现了4大“反常现象”,看看你碰到了没?

因为没钱,社会上已经出现了4大“反常现象”,看看你碰到了没?

细说职场
2026-04-26 14:29:20
21次精准命中!CNN曝AI接管战争,俄军“百公里安全区”一夜崩塌

21次精准命中!CNN曝AI接管战争,俄军“百公里安全区”一夜崩塌

小小科普员
2026-06-01 16:20:46
女生在性方面真正在意的是什么?

女生在性方面真正在意的是什么?

宇宙时空
2026-05-30 12:50:12
澎湃新闻:联赛上半程争议判罚非常多,冠军悬念已经不复存在

澎湃新闻:联赛上半程争议判罚非常多,冠军悬念已经不复存在

懂球帝
2026-06-02 12:17:21
央国企降薪争议,到底该不该让领导先降?基层真实心声,太现实了

央国企降薪争议,到底该不该让领导先降?基层真实心声,太现实了

职场资深秘书
2026-06-02 11:13:17
看了原著才知道,为降服悟空,如来付出多惨烈代价!

看了原著才知道,为降服悟空,如来付出多惨烈代价!

犀利强哥
2026-05-12 20:11:29
76岁的万科创始人王石,最近彻底成了全网焦点。

76岁的万科创始人王石,最近彻底成了全网焦点。

梦录的西方史话
2026-04-23 14:36:39
广西一市民反映路灯损坏却迟迟无人修,当地回复:管养单位申请破产,无可用资金与人力,无法维修

广西一市民反映路灯损坏却迟迟无人修,当地回复:管养单位申请破产,无可用资金与人力,无法维修

新浪财经
2026-06-02 11:31:25
李斌请到“高人”了

李斌请到“高人”了

虎嗅APP
2026-06-01 22:10:18
不宣而战,特朗普声东击西,美军在太平洋开火,英法德俄集体失声

不宣而战,特朗普声东击西,美军在太平洋开火,英法德俄集体失声

慕名而来只为你
2026-06-02 14:33:22
科创50血流成河,深圳豪宅连夜跳涨:第一批聪明人,已经跑了

科创50血流成河,深圳豪宅连夜跳涨:第一批聪明人,已经跑了

爱看剧的阿峰
2026-06-02 02:29:47
原来因为彩礼谈崩而分手的情侣这么多,网友:女朋友彩礼一直涨

原来因为彩礼谈崩而分手的情侣这么多,网友:女朋友彩礼一直涨

阿康四岁啦
2026-06-02 12:18:48
53岁任泉近况曝光!被曝与黄绮雯隐婚17年,身价几十亿成人生赢家

53岁任泉近况曝光!被曝与黄绮雯隐婚17年,身价几十亿成人生赢家

观史搜寻着
2026-06-01 10:57:12
给5岁女儿买11200元连衣裙,明明打对折,结果专柜收了全款!销售求原谅:工资低也可怜;爸爸怒了:他们道德绑架!

给5岁女儿买11200元连衣裙,明明打对折,结果专柜收了全款!销售求原谅:工资低也可怜;爸爸怒了:他们道德绑架!

扬子晚报
2026-06-01 12:26:28
烂透了!当下食品行业的道德底线,早已被贪婪的利益彻底碾碎。

烂透了!当下食品行业的道德底线,早已被贪婪的利益彻底碾碎。

二大爷观世界
2026-05-29 00:21:23
有色板块涨势扩大 锡业股份等多股涨停

有色板块涨势扩大 锡业股份等多股涨停

财联社
2026-06-02 13:12:34
2026-06-02 15:23:00
南方都市报 incentive-icons
南方都市报
换一种方式,南都在现场。
614560文章数 3588878关注度
往期回顾 全部

科技要闻

烧掉千亿后,美团、阿里、京东谁先止血?

头条要闻

上海女童几乎没上过学 外公找来前女婿把女儿告上法庭

头条要闻

上海女童几乎没上过学 外公找来前女婿把女儿告上法庭

体育要闻

1米74的业余联赛替补,在英超踢中卫

娱乐要闻

奚梦瑶何猷君婚礼曝光 深情热吻甜蜜

财经要闻

锂电“资源墙”高筑 全球性长期博弈开始

汽车要闻

星途神秘新车轮廓曝光 又一款性能SUV要来了?

态度原创

家居
艺术
手机
公开课
军事航空

家居要闻

流线型轮廓 包容多元身形

艺术要闻

周杰伦花 1.36 亿拍下这幅画

手机要闻

苹果 WWDC 2026 现场将特别放映《曼达洛人和古古》

公开课

李玫瑾:为什么性格比能力更重要?

军事要闻

伊朗媒体新发布最高领袖照片

无障碍浏览 进入关怀版