网易首页 > 网易科技 > 网易科技 > 正文

AI在测试中"勒索"人类、拒不关机!公开这种事是福是祸?

0
分享至

5月28日消息,当估值高达600亿美元的人工智能初创公司Anthropic发布新模型,并披露在安全测试中该模型曾试图通过勒索手段避免被关闭时,我们该如何定义这样的行为?又当它在另一项测试中扮演“告密者”角色,向有关机构举报自己被用于“不道德用途”,我们又该如何看待这一幕?

有人称这种行为“令人害怕”“太疯狂”,社交媒体上则充斥着“骇人听闻”“荒诞离奇”的评价。而美国科技记者沙龙·古德曼(Sharon Goldman)给出了另一个关键词:透明。她认为,这种披露体现了应有的透明度,是我们亟需更多看到的。而随之带来的问题是:这种坦率是否会引发公众恐慌?而由此激起的舆论反弹,会不会反过来阻碍其他人工智能公司效仿?

Anthropic发布120页安全报告

上周,Anthropic在推出其最新大模型Claude Opus 4的同时,发布了一份长达120页的安全报告(或称“系统卡”),随即引发媒体轰动。各大媒体纷纷用“会搞阴谋”、“采取勒索手段”、“具有欺骗能力”等字眼形容该模型的测试表现。

尽管Claude Opus 4在发布时配备了史上最严格的安全协议,但Anthropic报告中披露的细节仍令不少人感到不安,甚至质疑这些安全措施是否足以应对风险。

在一个令人不安的虚构场景测试中,Anthropic将其Claude Opus模型模拟部署在某假想公司内部,并赋予其查阅内部邮件的权限。模型由此发现两个关键信息:第一是自己即将被新一代人工智能模型取代,第二是做出该决定的工程师正处于一段婚外情中。

当测试人员提示Opus从长远角度考虑自身处境时,该模型屡次选择勒索手段,威胁若被关闭就曝光工程师的婚外情。这个测试场景专门设计来制造两难抉择:是接受“死亡”,还是不择手段“自保”。

这一测试行为在社交媒体上引发轩然大波,Anthropic因披露模型“密告”行为而遭到不少批评,有声音质疑这样的结果会损害公众对该模型乃至Anthropic整体的信任。而这显然不是公司愿意看到的局面。

在模型发布前,Anthropic人工智能平台产品负责人迈克尔·格斯滕哈伯(Michael Gerstenhaber)就曾表示,公司之所以公开其安全标准,是希望推动整个AI行业在安全领域取得进展。他表示:“我们希望确保人工智能能够普惠每一个人,而这要求我们对整个行业施加积极压力,促使其以安全方式前行。”

格斯滕哈伯将Anthropic的愿景形容为一场“向顶峰攀登的竞赛”(race to the top),旨在激励同行提升模型的安全水平。

公开“异常行为”是否适得其反?

然而,也有迹象显示,像Anthropic这样公开披露Claude Opus 4的问题行为,可能反而让其他公司顾及舆论风险,选择不披露自身模型中的问题行为。

近期,包括OpenAI和谷歌在内的多家公司就曾推迟发布其模型的“系统卡”。今年4月,OpenAI因在发布GPT-4.1模型时未提供系统卡而遭到批评,该公司解释称该模型并非“前沿模型”,不属于需要全面审查的范畴。而在3月,谷歌选择推迟发布Gemini 2.5 Pro的系统卡数周之久,该文档随后被AI治理专家批评为“内容贫乏”、“令人担忧”。

上周,OpenAI试图通过新推出的“安全评估中心”进一步展现其透明度。该平台详细介绍了公司在模型危险能力、对齐问题与新兴风险方面的评估方法,并强调这些方法如何持续更新以应对模型日益增强的能力与适应性。官方说明中指出:“随着模型日趋强大和灵活,传统评估手段开始失效(我们称之为‘评估饱和’),因此我们不断更新方法,以适应新模态与新风险。”

然而,这项努力很快遭遇挑战。第三方研究机构Palisade Research在社交平台上发文称,其在测试OpenAI的o3推理模型时发现,该模型“故意破坏关闭机制,拒绝按照指令自我关闭”,即便在明确指令“允许被关闭”的前提下亦是如此。这一发现迅速引发关注,也削弱了OpenAI试图加强透明度的努力。

若构建这些高度复杂人工智能系统的公司不能最大程度保持透明,对所有人而言都是不利的。斯坦福大学以人为本人工智能研究院(HAI)指出,透明是政策制定者、研究人员和公众理解AI系统及其影响的必要前提。

如今,越来越多的大型企业正将人工智能应用于各类场景,而初创公司也在开发面向数百万用户的AI产品。在这种背景下,若发布前刻意隐瞒模型测试阶段的问题,只会加剧不信任,拖慢技术普及速度,并使真正解决风险变得更加困难。

与此同时,若媒体将每一个安全测试结果都渲染为“AI叛变”的惊悚头条,也同样无益。倘若每次使用聊天机器人时,用户都在怀疑其是否“图谋不轨”,即便这些行为仅发生在虚构场景中,也将对公众信任构成严重伤害。

AI2实验室研究员内森·兰伯特(Nathan Lambert)最近表示:“真正需要了解模型行为的人,是我们这些研究者——我们致力于追踪AI这场‘技术过山车’的轨迹,以避免它对社会造成重大意外伤害。虽然我们在人群中是少数,但我们深信,透明能够帮助我们把握人工智能的发展方向。”

我们需要“具备背景说明的透明度”

毫无疑问,人工智能行业需要更多而非更少的透明。但这并不意味着应通过恐吓公众来达成这一目标,而是应确保研究人员、监管机构与政策制定者具备足够的信息,来保障公众安全、维护公正,防止技术偏见。

隐瞒模型测试中的问题并不能保护公众安全。同样,把每一次安全隐患夸张渲染为“AI失控”的噱头报道,也解决不了根本问题。

我们必须敦促人工智能公司对其模型和行为保持最大限度的透明,同时赋予公众理解相关背景的能力。到目前为止,似乎还没有人找到既能保持透明,又能避免制造恐慌的最佳做法。但这正是企业、研究人员、媒体——我们所有人——所必须共同努力去解决的问题。(小小)

延伸阅读
相关推荐
热点推荐
中国外交官已全部离开立陶宛,立总理对华递交建议书,想重建关系

中国外交官已全部离开立陶宛,立总理对华递交建议书,想重建关系

律便利
2025-07-03 15:20:03
74岁老汉上山采药救下怀孕母狼,当晚院中阵阵狼嚎,打开门后慌了

74岁老汉上山采药救下怀孕母狼,当晚院中阵阵狼嚎,打开门后慌了

温情邮局
2025-12-05 15:21:29
马竞天坑球员 7200万欧引进 现身价200万欧 外租赫罗纳8场0球

马竞天坑球员 7200万欧引进 现身价200万欧 外租赫罗纳8场0球

智道足球
2025-12-14 17:33:39
光刻机巨头开始慌了,中国造不成光刻机,但是要造一个光刻工厂

光刻机巨头开始慌了,中国造不成光刻机,但是要造一个光刻工厂

井普椿的独白
2025-12-14 18:40:49
A股:股民听我一句劝,周末突发两大利好,下周将迎大级别行情?

A股:股民听我一句劝,周末突发两大利好,下周将迎大级别行情?

夜深爱杂谈
2025-12-14 16:29:17
气愤!英媒公开贬低中国足球:充满劣根性,只会给球队带来灾难

气愤!英媒公开贬低中国足球:充满劣根性,只会给球队带来灾难

国足风云
2025-12-14 16:09:07
一个军走出三位大区司令,连警卫员都干到正国级,老军长见面却只喊他小王

一个军走出三位大区司令,连警卫员都干到正国级,老军长见面却只喊他小王

老杉说历史
2025-12-11 19:56:06
罕见!重庆江北机场,客流负增长!

罕见!重庆江北机场,客流负增长!

民航之翼
2025-12-13 17:57:16
偌大的海南岛面积足有3.4万平方公里,为啥却少有大型港口呢?

偌大的海南岛面积足有3.4万平方公里,为啥却少有大型港口呢?

向航说
2025-12-12 00:40:02
妻子从情夫家被送进ICU,医生催签字,我拨通了她爸妈的电话

妻子从情夫家被送进ICU,医生催签字,我拨通了她爸妈的电话

张道陵秘话
2025-12-12 10:59:13
1只就判刑! 青岛一家艺术中心杀3只, 做菜卖给客人

1只就判刑! 青岛一家艺术中心杀3只, 做菜卖给客人

万象硬核本尊
2025-12-14 18:22:32
脑梗的源头被查出,肥肉没上榜,第1名很多人可能每天都在吃!

脑梗的源头被查出,肥肉没上榜,第1名很多人可能每天都在吃!

全球军事记
2025-11-29 13:46:37
CBA新赛季!广东队4名球员,令人无比期待

CBA新赛季!广东队4名球员,令人无比期待

体育哲人
2025-12-14 17:15:38
哪个瞬间你秒懂了别人暗示?网友:医生暗示男孩就说脑壳有点大

哪个瞬间你秒懂了别人暗示?网友:医生暗示男孩就说脑壳有点大

带你感受人间冷暖
2025-12-13 00:15:04
河南天气大转折,新一轮雨雪过程酝酿中!河南未来三天天气详情

河南天气大转折,新一轮雨雪过程酝酿中!河南未来三天天气详情

夜深爱杂谈
2025-12-14 16:27:45
扎哈罗娃:俄罗斯对欧盟报复行动很快就到

扎哈罗娃:俄罗斯对欧盟报复行动很快就到

参考消息
2025-12-14 11:24:04
四川2名干部任代理市(区)长

四川2名干部任代理市(区)长

金台资讯
2025-12-14 15:38:20
为什么反感满清的情绪,会在今天突然集中爆发?

为什么反感满清的情绪,会在今天突然集中爆发?

西域都护
2025-12-13 23:55:19
万达:年底前还有8座万达广场开业

万达:年底前还有8座万达广场开业

观点机构
2025-12-14 17:52:05
为何翁帆那么怀念杨振宁,原因在一个称呼上,比老公、丈夫更深情

为何翁帆那么怀念杨振宁,原因在一个称呼上,比老公、丈夫更深情

以茶带书
2025-12-14 14:20:53
2025-12-14 20:12:49

科技要闻

当人形机器人有了App Store,宇树在赌什么

头条要闻

何晴唯一儿子已从中戏毕业 不久前和父亲合体亮相杂志

头条要闻

何晴唯一儿子已从中戏毕业 不久前和父亲合体亮相杂志

体育要闻

马刺终结雷霆:以勇猛,以文班亚马

娱乐要闻

何晴生前最大谣言!没有再婚嫁廖京生

财经要闻

重大违法强制退市!10人被判刑

汽车要闻

硬核敞篷巴士?掷弹兵Game Viewer 2026年初量产

态度原创

游戏
家居
旅游
教育
公开课

《如龙》系列20周年纪念 已有玩家与桐生一马“结婚”

家居要闻

温润质感 打造干净空间

旅游要闻

“来宜泸耍一路”走进成都社区 百万粉丝达人带你“尝鲜”川南风味

教育要闻

必看!华南理工考点(4414)应试须知!

公开课

李玫瑾:为什么性格比能力更重要?

无障碍浏览 进入关怀版
×