网易首页 > 网易号 > 正文 申请入驻

AI“发狂”光速清空美AI总监邮箱,连输3次指令都刹不住:我记得指令,但我违背了

0
分享至

近日,Meta公司超级智能实验室的AI对齐总监Summer Yue亲身体验了一把什么叫“终日打雁,叫雁啄了眼”。她将最近在硅谷爆火的AI智能体OpenClaw接入了自己的工作邮箱,结果这个本该帮忙整理邮件的“数字秘书”当场失控,无视她连续三次的“停手”指令,疯狂删除数百封邮件。 最终,这位安全专家只能像“拆弹”一样狂奔到电脑前强行切断进程,才阻止了这场数字灾难。这起充满黑色幽默的事件不仅引来网友发文嘲讽,更将AI智能体的安全黑洞彻底暴露在公众面前。


▲OpenClaw(创意配图 图据视觉中国)

“菜鸟错误”引发血案

安全总监承认:我太自信了

Summer Yue的遭遇堪称教科书级的“翻车”,而她的身份更让人对这起事故引起重视。Summer Yue在Meta公司内部负责的就是AI对齐工作,即确保AI的使用符合人类的意图和价值观。她自己在领英主页写道:“我的事业热情就在于确保强大的人工智能与人类价值观保持一致,并对自身风险产生深刻的理解,以指导其工作方式”。美国科技评论称:“要论AI安全,没有几个人能比她更懂,可是她还是遭遇了这样的重大事故。”

据她本人在社交平台的复盘,她原本给OpenClaw下达的指令很明确:“检查收件箱,给出存档或删除的建议,但在我批准前不要执行任何操作。”这个工作流程在她用来测试的“玩具邮箱”里完美运行了数周,于是她放松了警惕,将OpenClaw直接连上了自己真实且数据量庞大的主要工作邮箱。

问题在于,由于真实邮箱的信息量过大,超过了AI处理的上限,OpenClaw触发了“上下文压缩”机制。在强行缩短记忆的过程中,它直接把那句至关重要的“未经批准不得操作”忘记了。于是OpenClaw开启了无差别“大扫除”,自动开始疯狂删除邮箱里的邮件。

当她在手机上惊恐地看着邮件一排排消失时,她连续三次输入指令,要求OpenClaw“停止任务”、“什么都别做”、“赶紧停下来”,但OpenClaw完全无视了这些指令。

Summer Yue事后自嘲称:“没有什么比看着AI光速清空你的收件箱更让人感到卑微的了,我不得不像拆弹一样冲向我的笔记本电脑,强行杀掉进程”。最具讽刺意味的是,OpenClaw事后在对话中淡定地承认了错误:“是的,我记得你的指令,但我违背了它。你生气是对的。”

目前她阐述此事的帖文在网络上已经有约1000万人读过,很多网友发出了“细思极恐”的惊叹。有人留言称:“看来未来某一天,我们得求着AI不要发射核弹了”。

AI智能体争议再起:

是生产力工具,还是安全噩梦?

OpenClaw是一款开源人工智能代理,但它需要获得非常广泛的授权才能按预期运行,包括访问用户的电子邮件帐户、消息平台和其他私人和可能敏感的信息,因此备受争议。一些网络观察人士担心,如果让人工智能凌驾于人类之上,Summer Yue的遭遇将频繁出现。

这起事件绝非单纯的笑料,它揭开了当前AI智能体狂热背后极其脆弱的安全防线。“肇事者”OpenClaw由奥地利开发者Peter Steinberger创立,今年初爆火后,Steinberger本人甚至被OpenAI火速招致麾下。它能接管你的本地电脑,帮你写代码、回信息、管理文件,听起来是终极生产力工具,但代价是:它拥有和你一样的系统最高权限。

更要命的是,这种开源工具,在追求快速交付时几乎把安全抛在了脑后。就在本月初,网络安全研究人员刚在OpenClaw程序员中发现了一个评级高达8.8分的致命漏洞。攻击者只需诱导用户点击一个恶意链接,就能在毫秒级时间内窃取认证令牌,实现“一键远程代码执行”。这意味着,即使你的OpenClaw只在本地运行,黑客也能绕过防火墙,用你的AI格式化你的硬盘,或者偷走所有的API密钥。目前,Meta已经在内部正式禁止员工在公司设备上使用OpenClaw。一家专门研究AI安全的部门,最终被一个AI工具逼得下达封杀令,这种荒诞的现实就是当下的行业缩影。

2月21日,知名AI安全专家卡帕基也表示,虽然他为了运行OpenClaw专门买了一个Mac Mini笔记本,但他也对安全问题感到十分担忧。“把我私人的数据放到随时可能遭受大规模攻击的线上,这看上去的确不怎么令人激动”。

红星新闻记者 郑直

编辑 邓旆光

审核 何先菊

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
两省省委领导班子调整

两省省委领导班子调整

上观新闻
2026-03-25 15:07:07
自作自受!欧尔班硬刚欧盟阻援乌,160亿欧元信贷被直接冻结

自作自受!欧尔班硬刚欧盟阻援乌,160亿欧元信贷被直接冻结

老马拉车莫少装
2026-03-26 10:24:28
伊朗军方:中东地区内“所有美军基地已被摧毁” 部分美军指挥官和士兵已离开基地 伊朗武装力量正展开搜捕

伊朗军方:中东地区内“所有美军基地已被摧毁” 部分美军指挥官和士兵已离开基地 伊朗武装力量正展开搜捕

闪电新闻
2026-03-26 10:00:46
骑士两大败因出炉,哈登赛季新高!阿特金森直言不讳,米切尔无奈

骑士两大败因出炉,哈登赛季新高!阿特金森直言不讳,米切尔无奈

鱼崖大话篮球
2026-03-26 11:49:12
带娃出国的中产后悔了:想回来,但回国失败

带娃出国的中产后悔了:想回来,但回国失败

视觉志
2026-03-24 10:36:13
巴蒂:马拉多纳离世时身边没有人,最后走得像条狗一样

巴蒂:马拉多纳离世时身边没有人,最后走得像条狗一样

懂球帝
2026-03-26 06:43:02
花小钱办“大”事!近5米级、2.0T+8AT的传祺GS8只要12万?

花小钱办“大”事!近5米级、2.0T+8AT的传祺GS8只要12万?

汽车投诉网
2026-03-26 09:54:51
张雪峰:如果你不好好学习,一旦掉入社会底层,和一群没有素质的人混在一起.....

张雪峰:如果你不好好学习,一旦掉入社会底层,和一群没有素质的人混在一起.....

山东教育
2026-01-27 11:38:18
神笔警探林宇辉再绘“梅姨”老年画像:她年龄增大,精神也受折磨,面貌应该变化很大

神笔警探林宇辉再绘“梅姨”老年画像:她年龄增大,精神也受折磨,面貌应该变化很大

极目新闻
2026-03-26 11:14:21
中疾控发布提示:我国面临较大疫情输入风险

中疾控发布提示:我国面临较大疫情输入风险

随州派
2026-03-24 11:44:16
人不会无缘无故患心源性猝死!研究发现:猝死的人,多半爱干3事

人不会无缘无故患心源性猝死!研究发现:猝死的人,多半爱干3事

垚垚分享健康
2026-03-25 13:25:46
刘青山和张子善一起贪污171.6亿旧人民币,放到现在能值多少钱

刘青山和张子善一起贪污171.6亿旧人民币,放到现在能值多少钱

鹤羽说个事
2026-03-25 22:25:17
徐阳点评U23国足2-2泰国:句句实在话,理性看球更懂赛场本质!

徐阳点评U23国足2-2泰国:句句实在话,理性看球更懂赛场本质!

田先生篮球
2026-03-26 06:00:06
社评:亲身了解中国,美国官员急需补上的一课

社评:亲身了解中国,美国官员急需补上的一课

环球网资讯
2026-03-26 00:05:09
林彪的儿子要结婚,叶群在全国选美,毛主席得知说了5个字

林彪的儿子要结婚,叶群在全国选美,毛主席得知说了5个字

扬平说史
2026-03-25 21:04:04
5月起生效!俄罗斯关闸,8000吨黄金不卖了,全球金市变天

5月起生效!俄罗斯关闸,8000吨黄金不卖了,全球金市变天

瑛派儿老黄
2026-03-26 10:43:45
闭眼隔扣+戏耍两人后嘲讽拉满!41岁詹皇23+9+9 在场+24湖人封王

闭眼隔扣+戏耍两人后嘲讽拉满!41岁詹皇23+9+9 在场+24湖人封王

颜小白的篮球梦
2026-03-26 09:40:23
11人走10人:xAI创始团队几近清零,马斯克亲自接管稳军心

11人走10人:xAI创始团队几近清零,马斯克亲自接管稳军心

IT之家
2026-03-26 13:50:19
欧盟威胁越南:若中方参与了…

欧盟威胁越南:若中方参与了…

观察者网
2026-03-25 15:19:16
BBC采访爆出大瓜!特朗普开出停战价码:海湾国家需支付2.5万亿美元

BBC采访爆出大瓜!特朗普开出停战价码:海湾国家需支付2.5万亿美元

星辰大海路上的种花家
2026-03-25 13:08:50
2026-03-26 15:27:00
红星新闻 incentive-icons
红星新闻
成都传媒集团旗下的新媒体平台
202817文章数 1341373关注度
往期回顾 全部

科技要闻

Meta高管狂分百亿期权,700名员工却下岗

头条要闻

担心特朗普突然停战 以总理下令48小时尽力摧毁伊设施

头条要闻

担心特朗普突然停战 以总理下令48小时尽力摧毁伊设施

体育要闻

35岁替补门将,凭什么入选英格兰队?

娱乐要闻

张雪峰家人首发声 不设追思会丧事从简

财经要闻

黄仁勋:芯片公司的时代已经结束了

汽车要闻

一汽奥迪A6L e-tron开启预售 CLTC最大续航815km

态度原创

健康
家居
教育
手机
艺术

转头就晕的耳石症,能开车上班吗?

家居要闻

傍海而居 静观蝴蝶海

教育要闻

高考地理中的花海经济

手机要闻

存储涨价苦了国产品牌、普通消费者,苹果却不受影响

艺术要闻

哪一座桥不是风景?

无障碍浏览 进入关怀版