网易首页 > 网易号 > 正文 申请入驻

2025年GDC|“DeepSeek让大模型更普及了,AI治理也更急迫了”

0
分享至

DeepSeek火爆全球,人人都用上了AI,但在专家看来,在这一情况下,大模型的安全问题和治理问题也变得更为迫切。

“大模型存在诱导和欺骗行为怎么办?”“大模型失控了怎么办?”

在2025 GDC全球开发者先锋大会工作坊“安全超级智能”上,不少开发者和专业观众对AI安全提出担忧。

2025 GDC全球开发者先锋大会工作坊“安全超级智能”现场。

AI智能安全研究员朱小虎是此次工作坊的负责人,2019年他在上海成立了一个非营利机构——安全人工通用智能研究中心(The center for safe artificial general intelligence),希望能推动国内安全AGI的发展。2021年,朱小虎曾被麻省理工学院生命未来研究所邀请,以合作学者的身份专注于AI的风险研究和通用人工智能安全研究。

“现阶段的人工智能为人工混乱智能”,朱小虎告诉澎湃科技(www.thepaper.cn),在他看来,即便如DeepSeek、马斯克新发布的Grok3这类大模型在深度推理方面表现得非常优秀,但“并不安全。”

“你的AI大模型有可能会欺骗你。”朱小虎说。大模型具有“欺骗性价值对齐”(Deceptive value alignment)的情况,这种对齐以欺骗的方式获得,且不能反映AI的真实目标或意图的现象被称为“欺骗性价值对齐”。比如在训练阶段、推理阶段,模型对形成的上下文会形成一定的“欺骗性的对齐”,这会影响很多用户比如老人和小孩的个人判断,还有对隐私保护的侵犯等,这也是模型不安全的一大方面。

如果想要建立一个安全、可靠、可控且可信的人机(技)协作环境,就必须提出合理应对欺骗性价值对齐的有效措施。

“现阶段只能依靠技术手段去‘堵’而不是‘疏’。”朱小虎说,不过,目前的技术还无法完全解决这些问题,因为投入在AI安全领域的精力、时间、金钱和资源远远不足。这也是大模型落地行业待解的难题之一。

如何让AI变得更安全?2月22日,澎湃科技(www.thepaper.cn)和朱小虎聊了聊。

模型有“欺骗性对齐”的情况,Grok3也不安全

澎湃科技:如何理解AI Safety这一概念?

朱小虎:最早期AI安全分成了两个大类的概念,英文世界它有两个词来表达安全,Safety(安全性)和Security(安全防护、安保)。

Safety的概念比较宽泛,包括常提到的AI伦理方面也算是Safety的分支,它更强调在早期阶段将“安全”考虑清楚,包括后期设计方法、建立相应的保护措施、应用的方式。但Security从技术手段更强调模型的权重怎么保护、如何防止黑客攻击等。Safety更需要大家深入地思考找出实践的路径,目前国内的一线安全厂商他们其实强调在Security上的能力,大家对Safety的概念较为模糊。

澎湃科技:在你看来,现在AI大模型常见的风险有哪些?大模型技术最薄弱的环节、安全漏洞在哪里?

朱小虎:最严重的是现在大模型的“黑盒”特质(当人们输入一个数据,大模型就能直接输出一个答案,但是它的运作机制却没人知道,我们称之为“黑盒”)。

大模型很多内在机制基于神经网络和深度学习,比如通过梯度下降等训练方式优化,但它内在的连接和权重目前缺乏有效且可规模化的研究方法去理解。这导致在使用大模型技术时,生成的内容往往难以被用户完全理解。

这种模型训练规模达到万亿级别的,它对于单个的研究人员、一个公司来说,都是一个非常棘手的任务。OpenAI花费了大量精力在模型调校和对齐(Alignment)领域,利用强化学习使模型行为符合人类价值观和伦理约束,让OpenAI能够在大规模推广前确保模型的安全性。微软甚至Meta(原Facebook)等公司也曾推出了类似模型,但因为模型在当时出现了不可控的负面效果后暂停。

大模型本身除了不可解释性之外,架构还容易受到外界干扰。比如,恶意使用或黑客攻击可能导致模型在应用场景中产生不安全的扩散效应。这些问题进一步加剧了大模型在实际应用中的安全风险。

澎湃科技:对企业和用户来说,不安全的模型会有怎样的影响?

朱小虎:“不安全的模型”其实是一个模型的特质,一些研究人员包括Anthropic PBC,(一家美国的人工智能初创企业和公益公司)也非常重视安全,他们在研究过程中发现模型具有“欺骗性对齐”(Deceptive element)的情况。比如在训练阶段、推理阶段,模型对形成的上下文会形成一定的“欺骗性的对齐”,它可以欺骗人。这导致在大规模部署的时候,会影响很多用户比如老人和小孩的个人判断,还有对隐私保护的侵犯等,这也是模型不安全的一大方面。

投入在AI安全领域的精力、时间、金钱和资源远远不足

澎湃科技:在你的观察中,现在大模型哪些做得安全?

朱小虎: 即便马斯克刚发布的Grok3、DeepSeeK也并不是百分百安全,它还具有欺骗性和诱导性。虽然这类大模型的目标是实现AGI,但模型非常不安全,会衍生出很多问题需要大家解决。不安全的地方在于比如模型可能会被诱导输出一些暴力、危害性信息,甚至一些少儿不宜的内容。这是大模型本身固有的问题,所以需要大量内容审查和过滤,现在只能通过技术手段“堵”而不是“疏”。

目前的技术还无法完全解决这些问题,因为投入在AI安全领域的精力、时间、金钱和资源远远不足。加州大学伯克利分校的一位核安全专家曾提到,核领域的安全投入与核能力开发的比例是7:1。相比之下,AI安全需要投入更多资源来确保安全性。

这些也是大模型落地行业待解的难题之一。技术本身没有善恶,但现在技术让AI产生了价值观,因为训练大模型都是来自人类的数据,不管是正面或是负面,都可能产生危害。

澎湃科技:现在AI深度伪造技术能逼真到什么阶段?普通用户该如何辨别?

朱小虎:深度伪造(DeepFake)近几年确实在持续不断地发展,随着AI技术的增强,它的精细度会逐渐增强。很多时候普通用户比如年纪较大的还有小孩没有办法辨别。对模型企业来说,很多做的模型附带一些水印,这是防范AI深度伪造的技术手段之一,不过这只是初步的技术方案。

澎湃科技:你认为现在谈论AI治理和AI安全,为时过早吗?

朱小虎:之前我认为这个问题并不紧迫,但今年,特别是DeepSeek产生全球影响后,安全问题和治理问题变得非常急迫。过去,大家可能一直在缓慢探索治理和安全的策略,但现在进入了一个新阶段,即开放式的人工智能治理。过去,许多AI技术隐藏在公司或高校背后,例如OpenAI、Google DeepMind、Anthropic等,他们的许多内容并未公开,主要是防止技术扩散。

但现在,OpenAI和DeepSeek的发展激发了大家对开源生态的渴望,所以出现了许多实验和开源项目。全球的企业和高校都在推动开源AI或AGI的发展,这已成为一个明显的趋势。在这一过程中,需要从技术角度进行革新,构建新的框架或平台。这不是单个公司、群体或政府能够独立完成的,而是需要全社会的参与,从不同层面引入合理的方式,通盘考虑并推进。

澎湃科技:在你看来,一个安全的大模型应该是怎样的?

朱小虎:目前还没有出现一个非常好的安全模型。这是一个需要磨合的过程,未来可能会有新的研究机构出现来解决这些问题,因为安全性风险将很快成为现实问题。

目前我们主要追求的是需要模型“可证明安全”,这是非常严格的要求,但从长远来看是最可行的路径。现阶段我们都是通过实验和评估不断测试和改进,逐步逼近目标。

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
韩媒:日本亚运会表演出现“丰臣秀吉”引韩方强烈不满,日本亚组委回应

韩媒:日本亚运会表演出现“丰臣秀吉”引韩方强烈不满,日本亚组委回应

环球网资讯
2026-09-17 11:49:06
官宣!恭喜胡明轩!中国男篮等了整整24年

官宣!恭喜胡明轩!中国男篮等了整整24年

篮球实战宝典
2026-09-17 17:22:59
10天单杀96条蟒蛇!佛州猎蛇赛为何越办越火

10天单杀96条蟒蛇!佛州猎蛇赛为何越办越火

知识碎碎念
2026-09-17 13:22:24
人不会平白无故患带状疱疹!医生强调:得带状疱疹多半有4个共性

人不会平白无故患带状疱疹!医生强调:得带状疱疹多半有4个共性

芹姐说生活
2026-08-05 22:09:05
54岁藤原纪香,从未活在美颜滤镜里

54岁藤原纪香,从未活在美颜滤镜里

草莓解说体育
2026-09-15 06:46:01
“别联系官方平台!”上海市民催促菜鸟驿站尽快派送后,两件包裹接连发生破损

“别联系官方平台!”上海市民催促菜鸟驿站尽快派送后,两件包裹接连发生破损

上观新闻
2026-09-18 08:43:46
伦纳德:我不是那种为了追戒指 就设法加盟夺冠概率最高球队的人

伦纳德:我不是那种为了追戒指 就设法加盟夺冠概率最高球队的人

北青网-北京青年报
2026-09-17 19:57:02
敬一丹和老公分得有多清?敬一丹病逝后,亿万资产的丈夫处境曝光

敬一丹和老公分得有多清?敬一丹病逝后,亿万资产的丈夫处境曝光

阿废冷眼观察所
2026-09-18 09:54:49
30万斤堆积如山,树上6万斤无人问津,低价卖不动,农民满心无奈

30万斤堆积如山,树上6万斤无人问津,低价卖不动,农民满心无奈

三农雷哥
2026-09-05 12:16:13
狱友问我怎么进来的,我:贪10个亿。狱警上来就是一脚:装什么

狱友问我怎么进来的,我:贪10个亿。狱警上来就是一脚:装什么

悬案解密档案
2026-02-26 15:34:48
日本高层达成一致:高市拖得越久越好,中国的“原则”会越来越淡

日本高层达成一致:高市拖得越久越好,中国的“原则”会越来越淡

米老鼠的世界
2026-09-18 09:20:33
一家已经消失的手机品牌,做出了史上最好的安卓机

一家已经消失的手机品牌,做出了史上最好的安卓机

灰度测试中
2026-09-17 00:10:07
特朗普成为美国历史上最腐败的总统!民主党支持率59%

特朗普成为美国历史上最腐败的总统!民主党支持率59%

流逝的颜值
2026-09-17 17:05:59
中国为何不“收拾”菲律宾,原因很简单,每年乖乖送来2000多亿!

中国为何不“收拾”菲律宾,原因很简单,每年乖乖送来2000多亿!

共工之锚
2026-09-18 00:22:56
首批上手反馈令人失望?iPhone Duo接连翻车,轻掰机身外屏出现闪屏

首批上手反馈令人失望?iPhone Duo接连翻车,轻掰机身外屏出现闪屏

泡泡网
2026-09-17 10:11:45
女儿踩坏床头柜怕被骂悄悄扔掉,两天后母亲想起:有370多克黄金铂金和190余万银行存单全在床头柜里;安徽当地警方连夜追回,分毫未少

女儿踩坏床头柜怕被骂悄悄扔掉,两天后母亲想起:有370多克黄金铂金和190余万银行存单全在床头柜里;安徽当地警方连夜追回,分毫未少

三湘都市报
2026-09-17 21:32:50
国民党最大敌人出现,内鬼名单已爆,郑丽文出手,全线押注不交权

国民党最大敌人出现,内鬼名单已爆,郑丽文出手,全线押注不交权

最终冲刺啊
2026-09-18 04:13:55
不查不知道!原来他也出席敬一丹葬礼,央视一哥,65岁仍未婚无子

不查不知道!原来他也出席敬一丹葬礼,央视一哥,65岁仍未婚无子

萌眼探世界
2026-09-17 20:12:34
2岁女童洗澡被独自留在浴室,误触水龙头后70℃热水淋烫近2分钟!医生紧急提醒→

2岁女童洗澡被独自留在浴室,误触水龙头后70℃热水淋烫近2分钟!医生紧急提醒→

大风新闻
2026-09-18 09:07:03
伊朗取得史诗级战果:美军损失超过50架战机!美军官方认证!

伊朗取得史诗级战果:美军损失超过50架战机!美军官方认证!

一个坏土豆
2026-09-17 21:09:34
2026-09-18 13:48:49
澎湃新闻 incentive-icons
澎湃新闻
专注时政与思想的新闻平台。
932447文章数 5096245关注度
往期回顾 全部

科技要闻

苹果店外黄牛蹲守:18 Pro Max加价500

头条要闻

折叠iPhone还没开售 维修费引热议:换块屏或8000元

头条要闻

折叠iPhone还没开售 维修费引热议:换块屏或8000元

体育要闻

一个角色球员,靠什么在NBA征战17年

娱乐要闻

敬一丹逝世 央视送别,女儿成“心病”

财经要闻

中国汽车:尾大不掉,必须出清

汽车要闻

纯电/插混双动力+五座/六座双布局 海狮08应该怎么选?

态度原创

亲子
旅游
艺术
数码
公开课

亲子要闻

愈见你|我的剖腹产纪事

旅游要闻

陈保平:黑角有个华工墓园——非洲之行五

艺术要闻

韦启美 81岁时画的这幅瓶花,28.75万!

数码要闻

满电青春再出发!航嘉“满电青年计划”9月20日登陆东华大学

公开课

李玫瑾:为什么性格比能力更重要?

无障碍浏览 进入关怀版