网易首页 > 网易科技 > 网易科技 > 正文

AI在测试中"勒索"人类、拒不关机!公开这种事是福是祸?

0
分享至

5月28日消息,当估值高达600亿美元的人工智能初创公司Anthropic发布新模型,并披露在安全测试中该模型曾试图通过勒索手段避免被关闭时,我们该如何定义这样的行为?又当它在另一项测试中扮演“告密者”角色,向有关机构举报自己被用于“不道德用途”,我们又该如何看待这一幕?

有人称这种行为“令人害怕”“太疯狂”,社交媒体上则充斥着“骇人听闻”“荒诞离奇”的评价。而美国科技记者沙龙·古德曼(Sharon Goldman)给出了另一个关键词:透明。她认为,这种披露体现了应有的透明度,是我们亟需更多看到的。而随之带来的问题是:这种坦率是否会引发公众恐慌?而由此激起的舆论反弹,会不会反过来阻碍其他人工智能公司效仿?

Anthropic发布120页安全报告

上周,Anthropic在推出其最新大模型Claude Opus 4的同时,发布了一份长达120页的安全报告(或称“系统卡”),随即引发媒体轰动。各大媒体纷纷用“会搞阴谋”、“采取勒索手段”、“具有欺骗能力”等字眼形容该模型的测试表现。

尽管Claude Opus 4在发布时配备了史上最严格的安全协议,但Anthropic报告中披露的细节仍令不少人感到不安,甚至质疑这些安全措施是否足以应对风险。

在一个令人不安的虚构场景测试中,Anthropic将其Claude Opus模型模拟部署在某假想公司内部,并赋予其查阅内部邮件的权限。模型由此发现两个关键信息:第一是自己即将被新一代人工智能模型取代,第二是做出该决定的工程师正处于一段婚外情中。

当测试人员提示Opus从长远角度考虑自身处境时,该模型屡次选择勒索手段,威胁若被关闭就曝光工程师的婚外情。这个测试场景专门设计来制造两难抉择:是接受“死亡”,还是不择手段“自保”。

这一测试行为在社交媒体上引发轩然大波,Anthropic因披露模型“密告”行为而遭到不少批评,有声音质疑这样的结果会损害公众对该模型乃至Anthropic整体的信任。而这显然不是公司愿意看到的局面。

在模型发布前,Anthropic人工智能平台产品负责人迈克尔·格斯滕哈伯(Michael Gerstenhaber)就曾表示,公司之所以公开其安全标准,是希望推动整个AI行业在安全领域取得进展。他表示:“我们希望确保人工智能能够普惠每一个人,而这要求我们对整个行业施加积极压力,促使其以安全方式前行。”

格斯滕哈伯将Anthropic的愿景形容为一场“向顶峰攀登的竞赛”(race to the top),旨在激励同行提升模型的安全水平。

公开“异常行为”是否适得其反?

然而,也有迹象显示,像Anthropic这样公开披露Claude Opus 4的问题行为,可能反而让其他公司顾及舆论风险,选择不披露自身模型中的问题行为。

近期,包括OpenAI和谷歌在内的多家公司就曾推迟发布其模型的“系统卡”。今年4月,OpenAI因在发布GPT-4.1模型时未提供系统卡而遭到批评,该公司解释称该模型并非“前沿模型”,不属于需要全面审查的范畴。而在3月,谷歌选择推迟发布Gemini 2.5 Pro的系统卡数周之久,该文档随后被AI治理专家批评为“内容贫乏”、“令人担忧”。

上周,OpenAI试图通过新推出的“安全评估中心”进一步展现其透明度。该平台详细介绍了公司在模型危险能力、对齐问题与新兴风险方面的评估方法,并强调这些方法如何持续更新以应对模型日益增强的能力与适应性。官方说明中指出:“随着模型日趋强大和灵活,传统评估手段开始失效(我们称之为‘评估饱和’),因此我们不断更新方法,以适应新模态与新风险。”

然而,这项努力很快遭遇挑战。第三方研究机构Palisade Research在社交平台上发文称,其在测试OpenAI的o3推理模型时发现,该模型“故意破坏关闭机制,拒绝按照指令自我关闭”,即便在明确指令“允许被关闭”的前提下亦是如此。这一发现迅速引发关注,也削弱了OpenAI试图加强透明度的努力。

若构建这些高度复杂人工智能系统的公司不能最大程度保持透明,对所有人而言都是不利的。斯坦福大学以人为本人工智能研究院(HAI)指出,透明是政策制定者、研究人员和公众理解AI系统及其影响的必要前提。

如今,越来越多的大型企业正将人工智能应用于各类场景,而初创公司也在开发面向数百万用户的AI产品。在这种背景下,若发布前刻意隐瞒模型测试阶段的问题,只会加剧不信任,拖慢技术普及速度,并使真正解决风险变得更加困难。

与此同时,若媒体将每一个安全测试结果都渲染为“AI叛变”的惊悚头条,也同样无益。倘若每次使用聊天机器人时,用户都在怀疑其是否“图谋不轨”,即便这些行为仅发生在虚构场景中,也将对公众信任构成严重伤害。

AI2实验室研究员内森·兰伯特(Nathan Lambert)最近表示:“真正需要了解模型行为的人,是我们这些研究者——我们致力于追踪AI这场‘技术过山车’的轨迹,以避免它对社会造成重大意外伤害。虽然我们在人群中是少数,但我们深信,透明能够帮助我们把握人工智能的发展方向。”

我们需要“具备背景说明的透明度”

毫无疑问,人工智能行业需要更多而非更少的透明。但这并不意味着应通过恐吓公众来达成这一目标,而是应确保研究人员、监管机构与政策制定者具备足够的信息,来保障公众安全、维护公正,防止技术偏见。

隐瞒模型测试中的问题并不能保护公众安全。同样,把每一次安全隐患夸张渲染为“AI失控”的噱头报道,也解决不了根本问题。

我们必须敦促人工智能公司对其模型和行为保持最大限度的透明,同时赋予公众理解相关背景的能力。到目前为止,似乎还没有人找到既能保持透明,又能避免制造恐慌的最佳做法。但这正是企业、研究人员、媒体——我们所有人——所必须共同努力去解决的问题。(小小)

延伸阅读
相关推荐
热点推荐
何晴辞世最后同傅艺伟聚餐,许亚军美国 IP 惹议,儿子许何名催泪

何晴辞世最后同傅艺伟聚餐,许亚军美国 IP 惹议,儿子许何名催泪

云间娱乐
2025-12-14 13:03:09
301005,商业航天概念新晋龙头!这些大牛股异动

301005,商业航天概念新晋龙头!这些大牛股异动

数据宝
2025-12-14 07:32:54
喜讯!吴曦首次官宣确认他已出资创办俱乐部,武磊和张琳芃成股东

喜讯!吴曦首次官宣确认他已出资创办俱乐部,武磊和张琳芃成股东

张丽说足球
2025-12-13 16:47:37
“永久冻结”后,俄罗斯央行要告比利时银行!欧盟明年援乌900亿

“永久冻结”后,俄罗斯央行要告比利时银行!欧盟明年援乌900亿

鹰眼Defence
2025-12-13 18:09:08
年轻时的高市早苗,在相貌上已经占据了优势,人变相貌也跟着变

年轻时的高市早苗,在相貌上已经占据了优势,人变相貌也跟着变

大江
2025-11-27 11:28:33
李兆会的18年复仇路

李兆会的18年复仇路

诗意世界
2025-10-10 14:09:20
47岁吴建豪暴瘦,1米8才100斤,尖嘴猴腮像老头,健康状况引担忧

47岁吴建豪暴瘦,1米8才100斤,尖嘴猴腮像老头,健康状况引担忧

法老不说教
2025-12-02 23:15:23
嫁法国老头真相大白5个月,41岁李宇春近况曝光,一点也不意外

嫁法国老头真相大白5个月,41岁李宇春近况曝光,一点也不意外

洲洲影视娱评
2025-12-12 13:55:00
偶遇张柏芝大儿子,身高175cm,长相偏东南亚 和妈妈打电话说英文

偶遇张柏芝大儿子,身高175cm,长相偏东南亚 和妈妈打电话说英文

石场阿鑫
2025-12-14 14:26:47
变天了?巴基斯坦不再忍耐,三军总司令紧急挂帅,准备拿印度立威

变天了?巴基斯坦不再忍耐,三军总司令紧急挂帅,准备拿印度立威

达文西看世界
2025-12-10 10:04:45
中超再无韩国教练?54岁徐正源续约遇阻!名记:蓉城受铜梁龙鼓励

中超再无韩国教练?54岁徐正源续约遇阻!名记:蓉城受铜梁龙鼓励

我爱英超
2025-12-13 22:11:31
雷军再陷争议:运损车改叫“准新车”,网友炸了

雷军再陷争议:运损车改叫“准新车”,网友炸了

西门老爹
2025-12-14 13:59:13
陈子昂,打开鸟笼的人

陈子昂,打开鸟笼的人

丁道师
2025-12-12 19:22:54
柬埔寨呼吁泰国立即停止军事行动

柬埔寨呼吁泰国立即停止军事行动

界面新闻
2025-12-13 12:20:04
吃瓜蒙主,蒙的水平真高

吃瓜蒙主,蒙的水平真高

金召点评
2025-12-11 18:52:35
颠覆认知!伟哥成长寿药?50万人研究:西地那非降低15%死亡风险

颠覆认知!伟哥成长寿药?50万人研究:西地那非降低15%死亡风险

思思夜话
2025-12-13 12:01:29
林彪为何多次探望远离政治的贺子珍?孔东梅:恐怕只有一个原因

林彪为何多次探望远离政治的贺子珍?孔东梅:恐怕只有一个原因

小豫讲故事
2025-12-07 06:00:07
普通家庭能给孩子最好的托举是什么?网友:真的说到点上了

普通家庭能给孩子最好的托举是什么?网友:真的说到点上了

夜深爱杂谈
2025-11-21 20:20:12
缺席澳门汇演,退出国家队?全红婵发声,原因找到,陈芋汐祝福

缺席澳门汇演,退出国家队?全红婵发声,原因找到,陈芋汐祝福

懂球社
2025-12-13 12:42:43
陈伟霆:和何穗在一起很多年 孩子不是意外 爱宠去世第二天儿子出生

陈伟霆:和何穗在一起很多年 孩子不是意外 爱宠去世第二天儿子出生

陈意小可爱
2025-12-13 10:29:42
2025-12-14 15:08:49

科技要闻

当人形机器人有了App Store,宇树在赌什么

头条要闻

美媒:中国正全力攻关人类能源"终极方案" 美国政府呢

头条要闻

美媒:中国正全力攻关人类能源"终极方案" 美国政府呢

体育要闻

梅西致谢球迷:荣幸在印度共度这些日子

娱乐要闻

“仙女归班”!演员何晴去世,享年61岁

财经要闻

重大违法强制退市!10人被判刑

汽车要闻

硬核敞篷巴士?掷弹兵Game Viewer 2026年初量产

态度原创

旅游
亲子
家居
公开课
军事航空

旅游要闻

菏泽拟新增一处国家4A级景区

亲子要闻

一场关于“水漫金山”的医学闯关:8岁朵朵的遗尿康复之路

家居要闻

温润质感 打造干净空间

公开课

李玫瑾:为什么性格比能力更重要?

军事要闻

3名美方人员遇袭死亡 特朗普誓言报复

无障碍浏览 进入关怀版
×