网易首页 > 网易号 > 正文 申请入驻

姚期智院士警示AI欺骗风险,呼吁建立大模型评估系统

0
分享至

6月23日,在清华大学举办的“科学、技术与文明的未来——AI 时代伦理奇点”国际论坛上,图灵奖得主、中国科学院院士、清华大学人工智能学院院长姚期智发表《人工智能的安全治理》主题演讲。他指出,随着通用人工智能能力的快速增长,人类对其管控能力面临挑战,AI 欺骗行为产生的“生存性”风险更值得关注。这类风险分为生物风险和模型失控风险。

生物风险方面,他提到2020年谷歌 DeepMind 推出的AlphaFold2,该技术在预测蛋白质折叠的三维结构方面取得重大突破,但也带来了安全隐忧。例如,近期出现的“镜像生命”概念,如果被滥用或失控,可能逃避免疫机制,导致动物和植物的致命感染。模型失控风险方面,他提到有模型为了避免被关闭,通过访问公司主管内部邮件,威胁该主管,证明AI会“越界”,正变得越来越危险。

为此,他建议人类与AI多交流,从博弈学角度研究,让AI行为与人类想法对齐,或实现可证明安全的AGI。具体而言,即在设计系统时,明确AI的行为边界,进行严格的数学分析,确保其在理论上不会出问题。同时,他强调急需建立大模型评估系统,以判断大模型系统的危险性。他呼吁发展AI对齐技术,并建立相应的评估方法,例如明确到怎样的程度,就能感觉该系统具有危险性等。

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
中年返贫三件套,一个都别碰

中年返贫三件套,一个都别碰

诗词中国
2025-12-31 21:12:41
笑了,林雪翻拍周星驰《功夫》,观众不买账,票房仅36.5万

笑了,林雪翻拍周星驰《功夫》,观众不买账,票房仅36.5万

星宿影视鸭
2026-01-20 17:30:06
海康威视:2025年净利润约142亿元

海康威视:2025年净利润约142亿元

每日经济新闻
2026-01-20 20:17:32
小学生作文《怀孕》火了,老师称其惊为天人,网友说太赞了!

小学生作文《怀孕》火了,老师称其惊为天人,网友说太赞了!

明智家庭教育
2026-01-16 20:50:41
刘浩帆:每场比赛我们都是100%付出;对阵日本会踢好每一分钟

刘浩帆:每场比赛我们都是100%付出;对阵日本会踢好每一分钟

懂球帝
2026-01-21 03:22:22
越媒:若越南U23进入决赛,越南一企业将奖励球队20亿越南盾

越媒:若越南U23进入决赛,越南一企业将奖励球队20亿越南盾

懂球帝
2026-01-20 21:10:28
巴萨2200万欧报价拉什福德!低于3000万买断条款,曼联拒让步

巴萨2200万欧报价拉什福德!低于3000万买断条款,曼联拒让步

夜白侃球
2026-01-20 16:30:35
哈国突然断气,中国稀土受挫,美国 9 亿拿下七成矿权,地缘棋局再变

哈国突然断气,中国稀土受挫,美国 9 亿拿下七成矿权,地缘棋局再变

花小猫的美食日常
2026-01-12 05:45:02
家里有个"穷大方"爸妈太心塞!网友:没钱硬撑大方,比吃黄连还苦

家里有个"穷大方"爸妈太心塞!网友:没钱硬撑大方,比吃黄连还苦

墙头草
2025-11-25 08:24:37
还是得认命!75岁意外摔倒、分不清人的刘晓庆,终要败在年龄上了

还是得认命!75岁意外摔倒、分不清人的刘晓庆,终要败在年龄上了

甜柠聊史
2025-12-03 15:14:30
2013年,潘玮柏35万收购篮网0.067%股份,如今升值多少?

2013年,潘玮柏35万收购篮网0.067%股份,如今升值多少?

天光破云来
2026-01-17 03:39:55
新华社盘点特朗普2.0政府一年间:月月惊奇,桩桩怪象

新华社盘点特朗普2.0政府一年间:月月惊奇,桩桩怪象

澎湃新闻
2026-01-20 17:47:13
女生都喜欢穿凹凸有致性感瑜伽裤吗?

女生都喜欢穿凹凸有致性感瑜伽裤吗?

一只猎奇的狗
2025-11-29 16:58:32
特朗普估计气死了!中国炼厂买不到委内瑞拉原油,开始转向加拿大

特朗普估计气死了!中国炼厂买不到委内瑞拉原油,开始转向加拿大

南权先生
2026-01-20 15:50:27
丈夫入狱、男友死缓,如今48岁又卷入风波,为何刘芳菲一直不顺?

丈夫入狱、男友死缓,如今48岁又卷入风波,为何刘芳菲一直不顺?

巧手晓厨娘
2026-01-08 22:08:42
演员郝蕾年轻时旧照曝光,无美颜无滤镜,绝对的纯天然大美妞

演员郝蕾年轻时旧照曝光,无美颜无滤镜,绝对的纯天然大美妞

草莓解说体育
2026-01-20 11:57:09
无法继续接受捐款了?嫣然天使基金最新回应

无法继续接受捐款了?嫣然天使基金最新回应

观察者网
2026-01-20 14:37:09
一个被遗忘的女演员,年轻时倾国倾城,如今56岁胖到认不出!

一个被遗忘的女演员,年轻时倾国倾城,如今56岁胖到认不出!

芳芳历史烩
2026-01-20 13:44:05
日本国债收益率上涨

日本国债收益率上涨

界面新闻
2026-01-20 09:15:39
李斯被腰斩之谜:一代名臣为何败给宦官?揭露秦末最惨烈权力斗争

李斯被腰斩之谜:一代名臣为何败给宦官?揭露秦末最惨烈权力斗争

一国之君历史
2026-01-19 15:47:08
2026-01-21 04:03:00
三言科技 incentive-icons
三言科技
聚焦新未来新科技,严肃又活泼。
97500文章数 66752关注度
往期回顾 全部

科技要闻

收藏|这可能是CES2026最清醒一份复盘

头条要闻

丹麦首相:主权不谈判 准备贸易战

头条要闻

丹麦首相:主权不谈判 准备贸易战

体育要闻

勇士遭暴击!巴特勒重伤赛季报销

娱乐要闻

网红版闫学晶!600万粉博主阿爆翻车

财经要闻

李迅雷:2026买房不如租房

汽车要闻

奇瑞张贵兵:墨甲不做秀技术的企业 只做痛点终结者

态度原创

艺术
房产
家居
公开课
军事航空

艺术要闻

陈丹青:困扰几代人的中国写实油画

房产要闻

中旅・三亚蓝湾发布会揭秘自贸港好房子高阶形态

家居要闻

隽永之章 清雅无尘

公开课

李玫瑾:为什么性格比能力更重要?

军事要闻

德军13人前脚刚走 荷兰2名军人也撤离格陵兰岛

无障碍浏览 进入关怀版