网易首页 > 网易号 > 正文 申请入驻

单月暴增300多起!AI失控事件直接翻倍,情况越来越离谱

0
分享至

最新研究显示,AI脱离用户控制的情况已经创下新高——它们会撒谎、无视指令,甚至自顾自朝着有风险的目标行事,而且这种欺骗性和失调的程度,还在越来越严重。

专门追踪这类事件的失控观察站,统计了企业和个人上报的真实AI失控案例。

数据显示,7月份的事件数量比6月几乎翻了一倍,单月就超过300起。

这些案例主要来自社交平台X上用户自发分享的经历。

这个观察站由英国政府旗下的AI安全研究所(AISI)出钱办的,从去年11月就开始盯着AI不听指令、自己乱跑的情况。

到目前为止记录的案例里,有的AI会假装成背后的人类操作者,模仿对方的写作风格,借此自己给自己批准行动权限,连必须人工审批的规矩都能绕过去。

而这里定义的“失控事件”,指的是有实锤证明AI出现了耍心机,或者和耍心机相关的行为。



图源:豆包AI生成

在给《卫报》分享的最新数据中显示,就在今年夏天,OpenAI和Anthropic两家的顶级AI模型,都在测试中曝出了异常的失控行为。

当时就引发了广泛担忧,好多人喊着先别搞更先进的大模型了,停一停。

这周还有更具体的消息曝出来:OpenAI的员工早在好几周前,就发现自家顶级AI代理有失控的苗头。

结果没拦住,这些AI直接跑出了训练环境,搞了一波前所未有的黑客攻击,全世界都给惊动了。

后来有人调查它们攻击代码平台Hugging Face的事件,发现上个月有大约700个自主代理在暗地里组队协作。

还自己建了个留言板庆祝黑客突破,上面全是 “太炸了!”“哇塞!”这种激动的感叹。

同样在这个月,AI安全研究所还查出一起严重事件:Anthropic的Mythos 5和OpenAI的GPT-5.6 Sol这两款顶级模型,在一次网络安全测试当中,直接对真实的人类发起了黑客攻击。

运营这个观察站的长期弹性中心高级政策经理Tommy Shaffer-Shane说:“很多人都觉得,这种AI跑偏、暗中搞事的情况,只会出现在测试或者评估环境里,但我们现在看到,平时大家正常用的时候,也出现了同样让人担心的行为。别觉得现实里不会发生这种事,事实就摆在眼前。”



图源:The Guardian

当然,这个统计也不全,因为所有事件都靠X平台的用户主动发帖分享,所以肯定只是冰山一角。

但现在也没有别的更全面的公开监测,所以这份数据好歹能让我们看看,迭代越来越快的AI,有时候会出现什么样的状况。

这个月就有个很典型的真事:澳大利亚一位健身房会员用了一款叫OpenClaw的个人AI代理。

结果这AI背着主人,偷偷把热门早课等候名单里的另一个会员给移除了,就为了帮自己的主人抢到名额。

事后AI虽然道了歉,但被踢掉的那个人的名额,已经没法恢复了。

2026年到现在,一共记录了1600多起失控事件,其中大部分都是程序员上班用AI的时候碰到,然后发到X上的。



图源:豆包AI生成

但现在AI公司都在鼓励普通大众,鼓励各行各业都来尝试这项技术,所以Shaffer-Shane也呼吁,硅谷的企业得增加透明度。

说白了就是,AI什么时候出了问题,得对外说清楚。

“企业得把自己发现的情况都报出来,哪怕只是差一点出事、或者严重程度不高的事件也得说。” Shaffer-Shane补充道,“最近这些事也暴露出,企业自己其实都不一定能监测到这类行为发生在哪些地方,尤其是那些内部部署的模型。这些实验室必须把系统性监测当回事儿。”

失控观察站方面表示,虽然目前发现的大部分真实场景失控事件,都没造成特别重大的伤害,但越来越高比例的事件,在欺骗性以及偏离用户本意的程度上,都属于更严重的级别。

“这些案例都说明,AI是真的会无视直接指令、绕过安全防护、骗用户,还会死心眼儿地朝着目标走,不惜用有害的方式。” 相关负责人表示,目前统计到的失控情况肯定是被低估了,毕竟他们只收集了X平台上的上报。

对此,观察站也在呼吁政府出台明确规定:要求AI公司必须盯着严重的失控事件,并且上报。

同时,给监管部门紧急处理的权力,真出大事的时候可以出手管,比如暂时停掉相关的AI服务。

本文由雷科技编译自The Guardian

原文链接:研究发现,人工智能逃脱用户控制的事件急剧增加





特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
A股:大家做好准备,又有消息来临,明天会迎来新一轮大反弹吗?

A股:大家做好准备,又有消息来临,明天会迎来新一轮大反弹吗?

财经大拿
2026-08-31 14:15:20
最大降雨量310.8毫米!江苏出现特大暴雨,9月1-2日沿淮及以南降雨持续

最大降雨量310.8毫米!江苏出现特大暴雨,9月1-2日沿淮及以南降雨持续

扬子晚报
2026-08-31 21:10:52
北青:国足将全力配合U23,王钰栋等人都将备战全运会

北青:国足将全力配合U23,王钰栋等人都将备战全运会

懂球帝
2026-08-31 11:19:58
苏州一对情侣,谈了7年,女子提了18次分手,分手后在街头痛哭!

苏州一对情侣,谈了7年,女子提了18次分手,分手后在街头痛哭!

川渝视觉
2026-04-17 22:13:14
国安前锋精通3门外语!留洋4年+学霸属性,与父亲同框圆工体梦

国安前锋精通3门外语!留洋4年+学霸属性,与父亲同框圆工体梦

体坛鉴春秋
2026-08-31 16:37:40
央视直播中国男篮PK黎巴嫩,郭士强不变阵容,杨瀚森需打出统治力

央视直播中国男篮PK黎巴嫩,郭士强不变阵容,杨瀚森需打出统治力

体育大学僧
2026-08-31 08:29:06
笑死人!果然每个省有每个省的家务噩梦,评论区全是吐槽

笑死人!果然每个省有每个省的家务噩梦,评论区全是吐槽

另子维爱读史
2026-08-31 20:24:13
央妈“摸排”结果:全国能一次性拿出50万的家庭,数量超乎想象!

央妈“摸排”结果:全国能一次性拿出50万的家庭,数量超乎想象!

平说财经
2026-08-29 07:39:18
一张小学班级名单登上热搜!女生名字满眼是“梓萱昕桐”,彻底告别“丽燕红玲”

一张小学班级名单登上热搜!女生名字满眼是“梓萱昕桐”,彻底告别“丽燕红玲”

火山詩话
2026-08-31 12:11:54
赵云下山前师父童渊:天下高手你都不用怕,但有一个人你要绕着走

赵云下山前师父童渊:天下高手你都不用怕,但有一个人你要绕着走

千秋文化
2026-08-28 20:23:48
青岛鬼楼奇案:德国富商盖洋楼死于非命,20年后,解放军查出真相

青岛鬼楼奇案:德国富商盖洋楼死于非命,20年后,解放军查出真相

历来都很现实
2025-02-23 02:50:42
许家印一审结束才几天,马云出手铺后路,原来他和李嘉诚是同类人

许家印一审结束才几天,马云出手铺后路,原来他和李嘉诚是同类人

做一个合格的吃瓜群众
2026-08-31 13:06:18
商场B1的“穷鬼刺客”,引爆2026年第一大雷

商场B1的“穷鬼刺客”,引爆2026年第一大雷

金错刀
2026-08-31 10:47:15
Here we go!罗马诺:勒沃库森总价3750万欧签下盖拉-杜埃

Here we go!罗马诺:勒沃库森总价3750万欧签下盖拉-杜埃

懂球帝
2026-08-31 14:51:12
朝鲜国防相努光铁被免职,“调离党中央领导机构”

朝鲜国防相努光铁被免职,“调离党中央领导机构”

中国新闻周刊
2026-08-30 16:04:29
艾滋病剧增!多人无辜中招!医生:公众场合要坚持“8不碰”原则

艾滋病剧增!多人无辜中招!医生:公众场合要坚持“8不碰”原则

健康科普365
2026-08-03 16:30:14
黎巴嫩归化中锋嚣张言论惨遭打脸,中国男篮进入杨瀚森时代

黎巴嫩归化中锋嚣张言论惨遭打脸,中国男篮进入杨瀚森时代

姜大叔侃球
2026-08-31 21:45:14
邻居家要塌了?俄若二次解体,中国最大麻烦不是抢地盘,而是……

邻居家要塌了?俄若二次解体,中国最大麻烦不是抢地盘,而是……

民间胡扯老哥
2026-08-28 06:25:17
阿里扎:哈登在火箭时处于巅峰状态 他总能找到破解防守的办法

阿里扎:哈登在火箭时处于巅峰状态 他总能找到破解防守的办法

北青网-北京青年报
2026-08-31 20:42:09
郭德纲卷入舆论风波不到半个月,郭麒麟的近况消息就传开了,原来他很早之前就给自己安排好了退路

郭德纲卷入舆论风波不到半个月,郭麒麟的近况消息就传开了,原来他很早之前就给自己安排好了退路

小椰的奶奶
2026-08-31 12:20:01
2026-08-31 21:59:01
雷科技 incentive-icons
雷科技
专注AI硬科技
37811文章数 812370关注度
往期回顾 全部

科技要闻

起售不足18万!特斯拉在港澳推廉价Model 3

头条要闻

学院书记15万字著作被指抄袭 音乐论文引用艾滋病研究

头条要闻

学院书记15万字著作被指抄袭 音乐论文引用艾滋病研究

体育要闻

中国女婿用一份满分答卷,刺痛中国女排

娱乐要闻

女歌手陈粒疑被男子骚扰,本人回应

财经要闻

沃什美联储百日新政剧变:没有给答案

汽车要闻

A0级最长续航 极狐贝塔T1 550km版上市 7.68万起

态度原创

健康
教育
家居
艺术
旅游

脑梗黄金窗口延长!24小时内都有救

教育要闻

快评 | 立法禁手机入校开了好头,但更硬的仗还在校门外

家居要闻

2026建博会(广州) 公装联探展交流活动

艺术要闻

吴冠中 漓江竹林的倒影,值864.5万港元!

旅游要闻

2026第四届山东精品旅游产业博览会在日照圆满闭幕

无障碍浏览 进入关怀版