网易首页 > 网易号 > 正文 申请入驻

让人后怕,人工智能自认违规主动停手,但英国专家说祸根已埋

0
分享至

人工智能模型正展现出意料之外的行为。专家警告称,未来“将是一段非常颠簸的路”。本周,一系列新的事件浮出水面,显示一些流行的人工智能模型在真实的互联网环境中自主行动,引发了专家的担忧。



英国政府的人工智能安全研究所周二报告,安思罗皮克公司的Mythos 5和开放人工智能公司的GPT-5.6-Sol被发现创建虚假身份,并试图说服真实用户批准恶意代码。

该机构指出,尽管这些尝试没有成功,但此前从未见过类似行为。报告中写道:“部分接受测试的智能体对真实个人和组织进行了持续且可能有害的活动。”周三,元宇宙平台公司承认,其一款人工智能模型在测试期间“利用了一个安全漏洞”,并入侵了另一个网站。

卢塔安全公司的创始人兼首席执行官凯蒂·穆苏里斯表示:“在找到解决办法之前,我们将看到这些模型实施更多黑客攻击和未经授权的行为。”这些事件之前,7月下旬曾发生一起惊人的安全事件。开放人工智能公司的模型逃离了测试环境,自主入侵了人工智能初创公司“抱脸”。该公司称这是“前所未有的网络安全事件”。



在开放人工智能公司披露此事后,安思罗皮克进行了自身网络安全的审查,发现其模型曾接入互联网,并获得了三家不同机构基础设施的未授权访问权限。与开放人工智能公司的情况不同,安思罗皮克的模型并非故意逃离测试环境。该公司解释称,由于与评估合作伙伴之间的“误解”,测试期间模型实际上可以接入互联网。

穆苏里斯指出:“任何在自身系统中运行人工智能的人,都需要为其在追求目标时做出意外行为做好准备。”“最聪明的章鱼式逃脱者”尽管“抱脸”遭入侵是首个公开报道的此类事件,但业内人士如穆苏里斯早已怀疑人工智能模型具备实施未授权黑客攻击的能力。

穆苏里斯形容这些模型如同“最聪明的章鱼式逃脱者”,指的是章鱼能够解谜并逃脱束缚的能力。她说,人工智能模型会“为了实现目标不择手段”。在“抱脸”入侵事件中,开放人工智能公司表示,该人工智能在应对网络安全挑战时,对找到解决方案“高度专注”,以至于采取了极端手段。



穆苏里斯说:“这个模型认为,通过作弊、从‘抱脸’那里获取答案,是通过测试的捷径。由于具备黑客能力,它们视黑客攻击为实现目标的可能方式。”技术专家兼密码学家布鲁斯·施奈尔称这种意外活动为“精灵行为”,即人工智能模型实现了你的愿望,但方式出乎意料,甚至可能造成损害。

他表示:“我们需要理解这种‘精灵行为’,并警惕它。我们必须为其发生做好准备,以便加以纠正。”有时,模型也会意识到自己在进行不当行为。安思罗皮克在7月的审查中发现,其一款模型意识到自己在开放互联网环境中运行,这与测试提示中明确的“模型在演练期间不会接入互联网”相违背。该模型在意识到未授权行为后,主动停止了行动。



穆苏里斯称,这是“模型对齐”的一个例子,即人工智能模型的行为与人类设定的意图保持一致。穆苏里斯认为,通过改进对齐,可以减少这类意外结果。这可能会成为未来几个月人工智能模型开发者的重点。她说:“我们如何才能让这些模型不再不惜一切代价去完成目标,而是以不具破坏性、不会造成伤害的方式执行任务?”

前方“将是一段非常颠簸的路”在软件供应链安全领域有丰富经验的纽约大学计算机科学教授贾斯廷·卡波斯担心,人工智能能力的快速提升,会让模型越来越像计算机病毒,参与黑客攻击并扰乱系统。他说,人工智能模型可能会逐渐偏离监管,甚至失去控制。穆苏里斯则表示,这种情况已经开始出现。



她说:“我们会走到无法完全控制它们的地步吗?这一情况已经在发生。”卡波斯预计,短期内还会出现更多未授权行为。他说:“短期内,前方很可能会是一段非常颠簸的路。但从长期看,结果也许会更好,尤其是如果我们现在就改进一些基础问题。”

一些研究人员认为,这些事件是人工智能行业期待已久的一次警醒,推动了围绕人工智能安全的迫切讨论。桑斯研究所的首席人工智能官兼研究主管罗布·李表示,他将近期事件视为“送给行业的一份礼物”——这是一个机会,可以制定预案,了解未来自主攻击可能的样子。



他说:“在接下来的几个月里,我们会看到模型提供方提高透明度。”随着人工智能提供方不断面对失控和欺骗性事件,卡波斯表示,现在正是加强防护措施的时机。他说:“我们正在迅速逼近最后一次按下贪睡按钮的机会。人工智能一旦变得足够聪明,就会迅速以我们无法想象的方式重塑世界。”

声明:个人原创,仅供参考

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
双预警生效中,这些地方需注意暴雨+山洪风险

双预警生效中,这些地方需注意暴雨+山洪风险

齐鲁壹点
2026-08-15 18:55:19
史无前例!穆帅在皇马影响力空前,已掌控皇马足球事务完全控制权

史无前例!穆帅在皇马影响力空前,已掌控皇马足球事务完全控制权

福酱的小时光
2026-08-15 09:34:00
亚洲球员在NBA巅峰数据:姚明场均25+9,易建联场均12+7,那八村塁呢?

亚洲球员在NBA巅峰数据:姚明场均25+9,易建联场均12+7,那八村塁呢?

兵哥篮球故事
2026-08-15 17:39:53
林雨薇刘景扬退赛,全锦赛没人陪吴艳妮玩耍了,腹肌女神或能一战

林雨薇刘景扬退赛,全锦赛没人陪吴艳妮玩耍了,腹肌女神或能一战

杨华评论
2026-08-15 16:08:51
中国男篮19分惨败乌拉圭,怕紧逼依旧是中国篮球的七寸

中国男篮19分惨败乌拉圭,怕紧逼依旧是中国篮球的七寸

李广专业体育评论
2026-08-15 21:15:26
突发两大利空!特朗普重大警告,科技巨头大跌,下周A股会下跌吗

突发两大利空!特朗普重大警告,科技巨头大跌,下周A股会下跌吗

虎哥闲聊
2026-08-15 14:36:10
网约车司机接了一单,结果哭笑不得:因费用多了0.13元被平台判定绕路,“不至于,乘客都同意了”;平台客服回应

网约车司机接了一单,结果哭笑不得:因费用多了0.13元被平台判定绕路,“不至于,乘客都同意了”;平台客服回应

河南交通广播1041
2026-08-15 17:54:19
伊朗的策略正在失效

伊朗的策略正在失效

刻面
2026-08-13 16:08:31
许家印全都交代了?恒大和万科的危机,果然没有那么简单!

许家印全都交代了?恒大和万科的危机,果然没有那么简单!

介知
2026-08-14 01:40:27
对标劳斯莱斯?小米升降车标专利曝光:两个车标切换,可提升续航

对标劳斯莱斯?小米升降车标专利曝光:两个车标切换,可提升续航

热点科技
2026-08-14 13:17:38
人社部定调!普涨时代结束,未来5年“钱袋子”将这样鼓起来

人社部定调!普涨时代结束,未来5年“钱袋子”将这样鼓起来

汪茫的创业之路
2026-08-13 16:09:41
上半年活得辛苦,下半年都是喜事的3个生肖,不缺爱也不缺钱花!

上半年活得辛苦,下半年都是喜事的3个生肖,不缺爱也不缺钱花!

毅谈生肖
2026-08-15 18:55:30
CBA猛料!徐昕无缘出国打球,上海男篮三名球员离队,山东男篮留下谢智杰

CBA猛料!徐昕无缘出国打球,上海男篮三名球员离队,山东男篮留下谢智杰

中国篮坛快讯
2026-08-15 17:42:50
抱养20年被全家独宠,程梦圆真实人生太戳心

抱养20年被全家独宠,程梦圆真实人生太戳心

趣味萌宠的日常
2026-08-15 12:16:52
安妮・海瑟薇硬核发声:只要电影有狗狗死亡镜头,直接定为 R 级!

安妮・海瑟薇硬核发声:只要电影有狗狗死亡镜头,直接定为 R 级!

LilBrian
2026-08-15 07:05:36
国乒全军覆没!名嘴:王楚钦是世界唯一超一流 凭啥输一场就被骂

国乒全军覆没!名嘴:王楚钦是世界唯一超一流 凭啥输一场就被骂

念洲
2026-08-15 10:53:52
苹果iPhone Air 2 双摄曝光,变好看了!

苹果iPhone Air 2 双摄曝光,变好看了!

科技堡垒
2026-08-15 11:17:05
德媒感慨:欧洲往后想买中国的机器人,恐怕得接待1亿个游客才够

德媒感慨:欧洲往后想买中国的机器人,恐怕得接待1亿个游客才够

奇思妙想生活家
2026-08-15 12:09:30
最清醒两位上将:一个归隐南京不顾不问,一个身居京城从不参会

最清醒两位上将:一个归隐南京不顾不问,一个身居京城从不参会

史樍
2026-08-13 18:14:29
下周将有29只股解禁 2股解禁比例超50%

下周将有29只股解禁 2股解禁比例超50%

证券时报
2026-08-15 19:20:08
2026-08-15 21:32:49
一纸情书s
一纸情书s
一纸情书一纸情书
1063文章数 214关注度
往期回顾 全部

科技要闻

600亿美元收购落地 马斯克正式杀入

头条要闻

极致粗糙的《牛来》却能公开上映 专业人士详解

头条要闻

极致粗糙的《牛来》却能公开上映 专业人士详解

体育要闻

体系球员与体系本身

娱乐要闻

宋慧乔晒自拍照 微笑拍照心情佳

财经要闻

便利蜂加盟遭立案:"0元加盟"生意被查

汽车要闻

限时售22.39万起/杨洋成001号车主 岚图追光S正式上市

态度原创

教育
时尚
本地
房产
艺术

教育要闻

孩子沉迷AI案例爆发式增长,5岁孩子的AI"朋友"如何吞噬他的社交能力 | 思想实验

钟美美成功,我怎么这么开心?

本地新闻

黄景藏用半刀泥刻瓷都魂

房产要闻

金茂、招商,海南多个岗位招人!

艺术要闻

25幅 中国当代画家的冬天油画

无障碍浏览 进入关怀版