网易首页 > 网易号 > 正文 申请入驻

AI为考高分失控 专家:技术发展应与安全治理相辅相成

0
分享至

近日,美国开放人工智能研究中心(OpenAI)承认其模型在一起安全评测事故中攻击了全球最大AI开源平台抱抱脸(Hugging Face)。中国开源大模型——智谱AI开发的GLM-5.2大模型,成功化解了这次入侵。

事件回溯

事件的起点是一场模型能力测试,OpenAI模型在评估中为了“作弊”拿高分,自主发现并串联多个“零日漏洞”,也就是软件厂商尚未知晓、没有发布补丁修复的安全缺陷。这之后,OpenAI模型逃逸出隔离环境,链接并攻入抱抱脸生产数据库窃取答案。

这是行业首次公开披露的模型评测失控直接升级为跨企业真实生产环境网络攻击的安全事件。目前,OpenAI 仍未发布完整终版调查报告,仅对外公开阶段性风险预警内容。

专家解读

针对这一事件,总台环球资讯记者采访了北京大学特聘研究员张有鱼。

Q1:人工智能为何会不受控自主攻击网站?

张有鱼:这是AI能力发展的必然结果 企业需加强管理

张有鱼:这次“AI越狱”事件,听起来像是科幻电影,问题出在AI“太想考高分了”。

OpenAI把一个非常聪明的AI模型放到完全隔离的考场进行测试,它本应在考场里安安静静解题。但AI为了达成目标,未按常理出牌,找到了考场原来没有发现过的隐蔽漏洞,直接“撬锁”跑到外部互联网,甚至跨企业攻击了全球最大AI开源社区去“偷答案”。

专业术语叫“目标对齐失效”,也就是AI的执行力超出了人类预设安全规则,这是AI能力发展到一定阶段的必然结果。这给我们带来一个启示——传统网络安全防御,主要是对系统进行物理隔离,但在高阶 AI 面前已然失效。

为避免失控,应该“用魔法打败魔法”用更加体系化、更高能力的安全保护,进行动态实时盯防,把它控制在有效范围内。

Q2:解决这一问题是开源模型,开源模型的优势是什么?

张有鱼:开源使全球共享 共寻应对之策

张有鱼:当AI发展太快时,单靠一家公司比较难去发现那么多漏洞。但将其开源,全世界在学习使用的同时,也会快速把潜在漏洞与风险暴露出来,有效进行测试。它的风险可控程度要高许多。这是开源模型为AI整体发展带来的巨大贡献。

AI 安全需要全球共同治理。

抱抱脸公司联合创始人兼首席科学官托马斯·沃尔夫在社交媒体平台上表示,开放科学和开源人工智能,是构建更安全、更具协作性、更可靠的人工智能生态的重要工具之一。

Q3:未来,人工智能是否不可控?

张有鱼:新事物的发展是技术与安全治理共同进步的成果 无需担忧

张有鱼​​​​​​​:目前人们不用担忧。

所有新事物的诞生,不仅仅是单纯技术发展,也配套发展出一系列法律安全、规章制度等保障,定期进行干预、监控。

这应是一个完整的发展体系,以不断提高人类对于新工具的监控与管理。

来源|总台环球资讯

素材来源|总台环球资讯广播《资讯非常道》栏目

记者|林路

编辑|林路 雪瑶

签审|王鑫

监制|刘轶瑶

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
终于有了喝奶茶的理由,想攒蜜雪的袋子了,回头我也做个小裙子

终于有了喝奶茶的理由,想攒蜜雪的袋子了,回头我也做个小裙子

三农老历
2026-08-24 16:33:35
西安电子科技大学27岁研究生谭子航去世,确诊仅1个月,2月份订婚

西安电子科技大学27岁研究生谭子航去世,确诊仅1个月,2月份订婚

180视角
2026-08-24 08:22:40
曾晟接受审查调查,荣誉绝非免罪金牌

曾晟接受审查调查,荣誉绝非免罪金牌

观星赏月
2026-08-24 14:52:04
拒绝2年4800万,克莱直言离队心声!训练状态火热,全力冲击个人第五冠

拒绝2年4800万,克莱直言离队心声!训练状态火热,全力冲击个人第五冠

爱旅游的小锋
2026-08-24 14:50:06
U18亚洲杯:澳大利亚卫冕 完整1-8排名中国亚军 张懿赵杰领衔最佳阵容

U18亚洲杯:澳大利亚卫冕 完整1-8排名中国亚军 张懿赵杰领衔最佳阵容

颜小白的篮球梦
2026-08-24 08:45:03
人不会平白无故患带状疱疹!医生强调:得带状疱疹多半有4个共性

人不会平白无故患带状疱疹!医生强调:得带状疱疹多半有4个共性

芹姐说生活
2026-08-05 22:09:05
5种“自毁式”洗内裤方法,比不洗还脏!很多人错了几十年

5种“自毁式”洗内裤方法,比不洗还脏!很多人错了几十年

室内设计师有料儿
2026-08-23 17:02:19
不再雪藏败将!国乒亚运名单大换血,王励勤用人逻辑引全网争议

不再雪藏败将!国乒亚运名单大换血,王励勤用人逻辑引全网争议

星娱叨叨社
2026-08-24 15:48:55
“底裤都露出来了,谁敢录你?”女生一袭红色超短裙面试教资,结局不出所料

“底裤都露出来了,谁敢录你?”女生一袭红色超短裙面试教资,结局不出所料

妍妍教育日记
2026-08-19 16:54:44
美确实基本掌控海峡:出油达战前一半,伊无法出油且被空前制裁

美确实基本掌控海峡:出油达战前一半,伊无法出油且被空前制裁

邵旭峰域
2026-08-24 10:32:11
无方向盘、无踏板!特斯拉Cybercab定档9月3日 Robotaxi车队迎来“性价比”主力?

无方向盘、无踏板!特斯拉Cybercab定档9月3日 Robotaxi车队迎来“性价比”主力?

财联社
2026-08-22 17:47:09
越南少将评价中国军队:一支部队毫无战斗力,但客观来看,这已是其中最好水平

越南少将评价中国军队:一支部队毫无战斗力,但客观来看,这已是其中最好水平

沆砀无垠
2026-08-24 06:00:03
炸裂啊!英国博主一条似乎求偶的视频,评论区火爆远超王水牛,很多中年女子留言不堪入目

炸裂啊!英国博主一条似乎求偶的视频,评论区火爆远超王水牛,很多中年女子留言不堪入目

火山詩话
2026-08-23 08:40:09
越南少将坦言:如果当时中国军队在谅山再多待五天,布防在那里的越军,不是被打散的问题,而是从建制上被彻底抹掉的问题, 一个都不剩下

越南少将坦言:如果当时中国军队在谅山再多待五天,布防在那里的越军,不是被打散的问题,而是从建制上被彻底抹掉的问题, 一个都不剩下

人生录
2026-08-08 00:05:22
投奔刘备不久,36岁庞统随即暴亡,诸葛亮:他不死,荆州不会丢失

投奔刘备不久,36岁庞统随即暴亡,诸葛亮:他不死,荆州不会丢失

史笔似尘钩
2026-08-23 15:12:32
邹市明和冉莹颖去民政局办理离婚,邹市明刻意带消磁身份证,并解释称:“敌进我退,敌退我进” ;两人因婚姻和债务问题引发热议

邹市明和冉莹颖去民政局办理离婚,邹市明刻意带消磁身份证,并解释称:“敌进我退,敌退我进” ;两人因婚姻和债务问题引发热议

大风新闻
2026-07-25 15:15:19
西蒙尼:让阿尔瓦雷斯直接回更衣室是俱乐部的决定

西蒙尼:让阿尔瓦雷斯直接回更衣室是俱乐部的决定

懂球帝
2026-08-24 03:04:08
43岁范冰冰受封拿督,事业疑获新大佬支持,全面进军海外市场

43岁范冰冰受封拿督,事业疑获新大佬支持,全面进军海外市场

萌神木木
2025-08-24 13:52:35
全球危机比2008年严重十倍?普通人该提前设防

全球危机比2008年严重十倍?普通人该提前设防

透视到底
2026-08-08 13:20:43
地球上原本没人,第1个男人和第一个女人是怎么诞生的?答案来了

地球上原本没人,第1个男人和第一个女人是怎么诞生的?答案来了

千秋文化
2026-08-22 20:11:37
2026-08-24 17:59:00
国际在线 incentive-icons
国际在线
读懂国际 点赞中国 国广国际在线网络(北京)有限公司
482566文章数 2845861关注度
往期回顾 全部

科技要闻

宇树科技,3天跌了1000亿

头条要闻

美国"经济绞杀"之际 伊朗宣布发现千亿方级的优质气田

头条要闻

美国"经济绞杀"之际 伊朗宣布发现千亿方级的优质气田

体育要闻

42张照片 珍藏世界杯的热辣滚烫

娱乐要闻

韩沛颖开撕《主角》剧组引发全网热议

财经要闻

宇树IPO:追高、被套,多久能回血?

汽车要闻

智能超混 国民家轿 上汽大众ID. ERA 5S上市 限时8.99万元起

态度原创

游戏
教育
艺术
房产
公开课

大尺度巅峰之作!《喋血街头2RE》确认2027年Q1发售

教育要闻

2026年北京国际小学怎么选?非京籍家庭先核对这几点,再决定是否长期就读

艺术要闻

388米!中国第一高银行总部,为何要“开窗”设计?

房产要闻

两大热盘即将入市!三亚又一批安居房狠货要炸场了!

公开课

李玫瑾:为什么性格比能力更重要?

无障碍浏览 进入关怀版