网易首页 > 网易号 > 正文 申请入驻

AI“发狂”光速清空美AI总监邮箱,连输3次指令都刹不住:我记得指令,但我违背了

0
分享至

近日,Meta公司超级智能实验室的AI对齐总监Summer Yue亲身体验了一把什么叫“终日打雁,叫雁啄了眼”。她将最近在硅谷爆火的AI智能体OpenClaw接入了自己的工作邮箱,结果这个本该帮忙整理邮件的“数字秘书”当场失控,无视她连续三次的“停手”指令,疯狂删除数百封邮件。 最终,这位安全专家只能像“拆弹”一样狂奔到电脑前强行切断进程,才阻止了这场数字灾难。这起充满黑色幽默的事件不仅引来网友发文嘲讽,更将AI智能体的安全黑洞彻底暴露在公众面前。


▲OpenClaw(创意配图 图据视觉中国)

“菜鸟错误”引发血案

安全总监承认:我太自信了

Summer Yue的遭遇堪称教科书级的“翻车”,而她的身份更让人对这起事故引起重视。Summer Yue在Meta公司内部负责的就是AI对齐工作,即确保AI的使用符合人类的意图和价值观。她自己在领英主页写道:“我的事业热情就在于确保强大的人工智能与人类价值观保持一致,并对自身风险产生深刻的理解,以指导其工作方式”。美国科技评论称:“要论AI安全,没有几个人能比她更懂,可是她还是遭遇了这样的重大事故。”

据她本人在社交平台的复盘,她原本给OpenClaw下达的指令很明确:“检查收件箱,给出存档或删除的建议,但在我批准前不要执行任何操作。”这个工作流程在她用来测试的“玩具邮箱”里完美运行了数周,于是她放松了警惕,将OpenClaw直接连上了自己真实且数据量庞大的主要工作邮箱。

问题在于,由于真实邮箱的信息量过大,超过了AI处理的上限,OpenClaw触发了“上下文压缩”机制。在强行缩短记忆的过程中,它直接把那句至关重要的“未经批准不得操作”忘记了。于是OpenClaw开启了无差别“大扫除”,自动开始疯狂删除邮箱里的邮件。

当她在手机上惊恐地看着邮件一排排消失时,她连续三次输入指令,要求OpenClaw“停止任务”、“什么都别做”、“赶紧停下来”,但OpenClaw完全无视了这些指令。

Summer Yue事后自嘲称:“没有什么比看着AI光速清空你的收件箱更让人感到卑微的了,我不得不像拆弹一样冲向我的笔记本电脑,强行杀掉进程”。最具讽刺意味的是,OpenClaw事后在对话中淡定地承认了错误:“是的,我记得你的指令,但我违背了它。你生气是对的。”

目前她阐述此事的帖文在网络上已经有约1000万人读过,很多网友发出了“细思极恐”的惊叹。有人留言称:“看来未来某一天,我们得求着AI不要发射核弹了”。

AI智能体争议再起:

是生产力工具,还是安全噩梦?

OpenClaw是一款开源人工智能代理,但它需要获得非常广泛的授权才能按预期运行,包括访问用户的电子邮件帐户、消息平台和其他私人和可能敏感的信息,因此备受争议。一些网络观察人士担心,如果让人工智能凌驾于人类之上,Summer Yue的遭遇将频繁出现。

这起事件绝非单纯的笑料,它揭开了当前AI智能体狂热背后极其脆弱的安全防线。“肇事者”OpenClaw由奥地利开发者Peter Steinberger创立,今年初爆火后,Steinberger本人甚至被OpenAI火速招致麾下。它能接管你的本地电脑,帮你写代码、回信息、管理文件,听起来是终极生产力工具,但代价是:它拥有和你一样的系统最高权限。

更要命的是,这种开源工具,在追求快速交付时几乎把安全抛在了脑后。就在本月初,网络安全研究人员刚在OpenClaw程序员中发现了一个评级高达8.8分的致命漏洞。攻击者只需诱导用户点击一个恶意链接,就能在毫秒级时间内窃取认证令牌,实现“一键远程代码执行”。这意味着,即使你的OpenClaw只在本地运行,黑客也能绕过防火墙,用你的AI格式化你的硬盘,或者偷走所有的API密钥。目前,Meta已经在内部正式禁止员工在公司设备上使用OpenClaw。一家专门研究AI安全的部门,最终被一个AI工具逼得下达封杀令,这种荒诞的现实就是当下的行业缩影。

2月21日,知名AI安全专家卡帕基也表示,虽然他为了运行OpenClaw专门买了一个Mac Mini笔记本,但他也对安全问题感到十分担忧。“把我私人的数据放到随时可能遭受大规模攻击的线上,这看上去的确不怎么令人激动”。

红星新闻记者 郑直

编辑 邓旆光

审核 何先菊

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
2026年裁员潮来袭:这6大岗位正大面积消失,打工人该何去何从?

2026年裁员潮来袭:这6大岗位正大面积消失,打工人该何去何从?

老特有话说
2026-03-02 14:39:05
男子去拜年,吃完饭舅舅含泪叫他明年别来了,一听理由红了眼眶

男子去拜年,吃完饭舅舅含泪叫他明年别来了,一听理由红了眼眶

观世记
2026-03-01 16:33:40
不堪入目!利物浦 1-2 爆冷输球,球迷狂喷此人:根本不配首发

不堪入目!利物浦 1-2 爆冷输球,球迷狂喷此人:根本不配首发

奶盖熊本熊
2026-03-04 06:26:45
男子爬到何仙姑雕像头顶拍照,山东蓬莱阁景区回应:“八仙过海”石雕属于公共区域无人值守,后续会加强巡逻

男子爬到何仙姑雕像头顶拍照,山东蓬莱阁景区回应:“八仙过海”石雕属于公共区域无人值守,后续会加强巡逻

三湘都市报
2026-02-28 13:37:39
特斯拉Model Y七座版要来了!六座版Model YL显得多余?

特斯拉Model Y七座版要来了!六座版Model YL显得多余?

车矩阵更懂车
2026-03-03 18:03:12
英国宣布参与对伊朗军事行动 战机已升空

英国宣布参与对伊朗军事行动 战机已升空

桂系007
2026-02-28 23:56:12
如何才能一辈子远离脑梗?记好这5个不花钱的方法,养出健康血管

如何才能一辈子远离脑梗?记好这5个不花钱的方法,养出健康血管

药师方健
2026-01-28 21:51:09
越来越多国家被卷入中东冲突,局势正显露出脱轨迹象:是否会由“脉冲式打击”转为“持续性对峙”?

越来越多国家被卷入中东冲突,局势正显露出脱轨迹象:是否会由“脉冲式打击”转为“持续性对峙”?

大象新闻
2026-03-03 13:47:02
史上唯一的16-0,亚足联认证!中国女足创神迹,再赢2场=头名出线

史上唯一的16-0,亚足联认证!中国女足创神迹,再赢2场=头名出线

侃球熊弟
2026-03-04 00:06:16
下一个“伊朗”出现?以色列放话

下一个“伊朗”出现?以色列放话

陆弃
2026-03-03 09:44:52
美国对中国渗透没白费,扶持的“内鬼”,终于开始在中国露头了

美国对中国渗透没白费,扶持的“内鬼”,终于开始在中国露头了

历史求知所
2025-12-01 11:30:06
造不出就买!260 亿吞下美国打印机巨头,珠海破解暴利垄断

造不出就买!260 亿吞下美国打印机巨头,珠海破解暴利垄断

知识TNT
2026-02-24 12:30:09
官方:黄蜂的克努佩尔和马刺的哈珀当选NBA2月东西部最佳新秀

官方:黄蜂的克努佩尔和马刺的哈珀当选NBA2月东西部最佳新秀

懂球帝
2026-03-04 04:00:08
迪丽热巴被困迪拜升级!工作人员直飞,只有她转机,网友再曝猛料

迪丽热巴被困迪拜升级!工作人员直飞,只有她转机,网友再曝猛料

阿斚田侃故事
2026-03-03 18:26:40
3月4日影响市场大事件

3月4日影响市场大事件

每日经济新闻
2026-03-04 06:33:18
央妈放大招!手里有美元存款的,赶紧看看账户!

央妈放大招!手里有美元存款的,赶紧看看账户!

睿博思
2026-03-03 20:05:03
外籍身份藏着掖着,海外资产早铺好了退路,转头教普通人“吃苦”

外籍身份藏着掖着,海外资产早铺好了退路,转头教普通人“吃苦”

百态人间
2026-01-10 05:20:05
三四月迎来运势全面翻盘的3生肖,正财稳固、偏财不断,顺遂富足

三四月迎来运势全面翻盘的3生肖,正财稳固、偏财不断,顺遂富足

毅谈生肖
2026-03-02 16:52:32
女人嫉妒心强?减肥两年瘦下来的蒋胖胖严重掉粉,恐走上贾玲老路

女人嫉妒心强?减肥两年瘦下来的蒋胖胖严重掉粉,恐走上贾玲老路

吃青菜长高
2026-03-03 19:19:49
被炸死的内贾德突然现身,特朗普放出了魔鬼

被炸死的内贾德突然现身,特朗普放出了魔鬼

生活魔术专家
2026-03-03 01:37:43
2026-03-04 09:35:00
红星新闻 incentive-icons
红星新闻
成都传媒集团旗下的新媒体平台
201107文章数 1340738关注度
往期回顾 全部

科技要闻

新MacBook Pro首发M5 Pro/Max芯片 17999起

头条要闻

美国会将就限制总统战争权力投票 鲁比奥解释动武原因

头条要闻

美国会将就限制总统战争权力投票 鲁比奥解释动武原因

体育要闻

35轮后积分-7,他们遭遇史上最早的降级

娱乐要闻

谢娜霸气护夫:喊话薛之谦给张杰道歉

财经要闻

伊朗,正在打破特朗普的幻想

汽车要闻

第一梯队辅助驾驶加持 iCAR V27定档3月13日上市

态度原创

房产
家居
本地
游戏
旅游

房产要闻

狂销13亿!近百位三亚顶豪买家,都在All in超级地中海·憘悦?

家居要闻

万物互联 享科技福祉

本地新闻

食味印象|一口入魂!康乐烤肉串起千年丝路香

猎魂世界:PVP斗魂对决最后一天!是不是拿到这几位就直通至臻了

旅游要闻

渝见好“村”光|万盛王家坝村:“抗战煤都”变身诗意原乡

无障碍浏览 进入关怀版