网易首页 > 网易号 > 正文 申请入驻

Bengio领衔2026年国际AI安全报告:迎接风险与机遇博弈的治理挑战

0
分享至

2026年2月,由图灵奖得主约书亚·本吉奥(Yoshua Bengio)教授领衔、来自30多个国家和国际组织(包括欧盟、OECD、联合国)的100余位专家共同编撰的《2026年国际AI安全报告》(International AI Safety Report 2026)正式发布 。这是继2025年首份报告后的又一总结性质的著作。在AI技术发展日新月异的今天,这份报告为我们揭示了哪些硬核趋势?相比去年,我们的处境是更安全了,还是面临着更复杂的变局?

01

跨越一年:2026与2025版的深度“复盘”与对比

在深入解读核心观点前,我们先来看看2026年版报告在视角和内容上发生了哪些关键演变。

范围收窄:聚焦“新兴风险”

相比2025年报告涵盖偏见、环境影响、隐私和版权等广泛议题,2026年版显著收窄了研究范围,将核心聚焦于“新兴风险”(Emerging Risks)。这意味着全球专家组认为,目前最迫切的威胁来自于通用AI能力“前沿”的滥用和网络安全风险。

预测升级:引入OECD的情境化建模

第一版报告更多是对现状的总结,而今年,报告与OECD及预测研究机构合作,首次呈现了更加具体的情境预测和路径分析。通过对计算能力(compute)、算法效率(algorithmic efficiency)和数据规模三大驱动因素建模,报告为政策制定者提供了直至2030年AI能力发展的四种可能走向。

他们分别是:

(1)进展停滞:受算力、数据或投资瓶颈限制,AI能力基本保持不变。

(2)进展放缓:边际收益递减,仅在受控环境下(如工厂、实验室)有较慢进展。

(3)持续进展:保持当前快速发展速度,AI成为“专家级协作者”。

(4)加速发展:AI开始参与AI本身的研发,形成正反馈闭环,达到或超过人类认知水平。

风险实证:强调“现实证据”

如果说2025年我们还在讨论AI可能带来的网络威胁,那么2026年的报告则指出:证据已经确凿 。过去一年中,AI在发现软件漏洞和编写攻击代码方面的能力大幅提升,国家级攻击组织利用AI进行网络行动的案例已被频繁记录。

02

2026报告核心观点解读:AI正变得“聪明且危险”

在这份长达百页的报告中,我们提炼出以下几个维度的核心洞察:

能力“参差不齐地”进化 (Jagged Capabilities)

目前的AI呈现出一种“不稳定的智能性”:它能解决奥数金牌难度的数学题,却可能在数图片里有几个苹果这种简单任务上翻车。报告指出,领先系统在化学、法律等本科考试中得分超过90%,在奥数竞赛中达到金牌水平。但是其空间推理能力极差,且容易受到“幻觉”困扰,无法在没有人类干预的情况下独立执行多进程项目,这种"强复杂任务、弱简单任务"的能力分布,反映了当前AI系统的基本局限。

“推理系统”(Reasoning Systems)与“推理成本”的崛起

报告强调,性能提升不再仅依赖于模型规模的增加,更多来自于“后训练技术”和“推理时扩展”(Inference-time Scaling)。“推理系统”能够在最终答案前生产中间推理步骤,即“思维链”(Chain of thought)。2025年,Google的Gemini Deep Think和OpenAI的实验模型在结构化测试环境下解决了奥数金牌难度的问题。这种"推理时扩展"技术意味着:模型性能不仅取决于训练时的投入,还可在部署后通过分配更多计算资源来提升。当然,这种“深思熟虑”也会消耗更多算力,显著提高“推理成本”。

AI智能体(AI Agent)的崛起

AI智能体(AI Agent)被定义为能够在较少人工监督的情况下能够自主追求目标并执行任务的AI系统。其发展十分迅速,目前已经可以完成人类程序员约30分钟任务的软件工程任务(成功率80%),而且能处理的任务复杂度每7个月翻一番,已经被广泛应用于软件工程、研究、机器人控制、客户服务等领域。但也正因其有高度自主性,进一步带来了额外的风险,使得人类更难在故障造成伤害前提前进行干预,对于相关风险管控能力的要求进一步提升。

AI新型风险涌现

报告将通用AI新型风险划分为三类:恶意使用风险、故障风险和系统性风险。

其中“恶意”使用的三个重灾区是网络攻击、生物与化学风险和对人类信念的影响与操纵。网络攻击方面,AI代理在网络安全竞赛中已能自主识别77%的软件漏洞,进入前5%的水平。由AI所发起的网络攻击成了目前网络安全方面需要重点关注的对象。

生物与化学方面, 通用AI系统可提供关于生物和化学武器开发的信息,顶尖模型在指导病毒实验规程方面的表现已超过94%的领域专家,多家公司已因无法排除其协助开发生物武器的可能性而对2025年后的新模型实施了严格管控,或是选择发布带有额外安全措施的新模型。

对人类信念的影响与操纵方面,目前报告指出,AI生成的说服性内容在改变人类信念方面已不亚于甚至优于普通人类专家。实验表明,在5分钟对话后,参与者将GPT-4o生成的文本误认为人类编写的比例达77%;听众在80%的情况下将AI语音克隆误认为真实说话者。

除了恶意风险和固有的故障风险(幻觉、失控等)之外,AI也面临着系统性风险的影响。一是劳动力市场中,AI可能自动化广泛的认知任务,尤其是可能替代部分早期知识性工作(如写作),但目前对总体就业的影响尚不确定;二是对人类自主性的分层,如AI伴侣应用可能会造成人类的心理依赖,导致相信自动化偏见或是批判性思维削弱等问题。

03

深度解读:我们该如何自救?

风险管理的核心矛盾在于:技术不可控与制度跟不上。AI的新能力往往突然涌现,模型内部机制却仍是黑箱,部署前的测试结果也难以预测实际风险。更棘手的是,开发商有动力隐瞒关键信息,开发速度又倒逼团队牺牲安全换取进度。

政策制定者往往面临“证据困境”(evidence dilemma):过早采取行动可能导致无效甚至有害的干预措施,但是收集和评估其对社会的影响所需的证据需要时间,又可能使社会面临潜在风险影响。面对这种不确定性,报告提出了“深度防御”(Defence-in-depth)策略。报告强调,没有任何单一的防火墙是完美的,必须在多个层面共同筑起防线,例如事前靠威胁建模和能力评估设定危险阈值;事中用分类器、护栏、RLHF等技术手段拦截风险;事后通过事件报告和行业共享弥补漏洞。但这些措施都有明显短板——复杂攻击能绕过防护,开源模型的保障措施更易被拆除,一旦发布便无法召回。

没有万全之策,但可以通过建设社会韧性——在技术快速演进中构建适应性治理框架,并通过基础设施强化、公众教育及国际合作建设社会韧性,以应对不可避免的冲击。

04

结语

通用AI不仅是生产力工具,更是重塑社会契约的深层力量。正如Bengio教授在序言中所说,我们正在经历这一时代最重大的技术转型。理解风险,是为了更安全地拥抱繁荣。

数据来源:International AI Safety Report 2026,International AI Safety Report 2025

来源|全球人工智能创新治理中心

作者 | 刘前昊、袁露铭

排版 | 蒲云涛

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
中期选举“大限将至”,特朗普急求俄罗斯:奉上乌克兰小命一条

中期选举“大限将至”,特朗普急求俄罗斯:奉上乌克兰小命一条

News脑洞
2026-10-22 17:09:16
“你女儿法号是?”家长给中学女儿的带饭:看似丰盛,蛋白质含量却几乎为0

“你女儿法号是?”家长给中学女儿的带饭:看似丰盛,蛋白质含量却几乎为0

妍妍教育日记
2026-09-30 10:35:15
吞11连败后降级!海牛副总:政府承诺的4000万一直没到位 债务太高

吞11连败后降级!海牛副总:政府承诺的4000万一直没到位 债务太高

风过乡
2026-10-23 10:10:57
深度长文:猪一辈子关在猪圈里,为什么不会"憋疯"抑郁?其实它会

深度长文:猪一辈子关在猪圈里,为什么不会"憋疯"抑郁?其实它会

宇宙时空
2026-10-23 12:04:32
成都一场婚礼的寒酸程度把全国人民都看愣了

成都一场婚礼的寒酸程度把全国人民都看愣了

七月生活情感驿站
2026-10-11 21:16:41
争冠生死战还没开打,大连英博先迎来一个坏消息,取胜成都蓉城悬了

争冠生死战还没开打,大连英博先迎来一个坏消息,取胜成都蓉城悬了

零度眼看球
2026-10-23 08:36:44
陈宇昕事件再升温!解放军发声,遣返只是开始,背景调查才要命!

陈宇昕事件再升温!解放军发声,遣返只是开始,背景调查才要命!

大眼妹妹
2026-10-20 22:48:29
三问“问界汽车在神木碰撞起火事故”:撞击瞬间时速是多少?AEB是否启动?起火是否太快?

三问“问界汽车在神木碰撞起火事故”:撞击瞬间时速是多少?AEB是否启动?起火是否太快?

澎湃新闻
2026-10-23 07:46:29
首秀38分!状元弗拉格10投6中,众新秀揭幕战齐爆发

首秀38分!状元弗拉格10投6中,众新秀揭幕战齐爆发

慢享生活集
2026-10-23 02:44:54
国足U16强势夺冠,连创组内三大纪录,目标直指未来冠军!

国足U16强势夺冠,连创组内三大纪录,目标直指未来冠军!

鲸探所长
2026-10-23 09:56:12
“精日”学生被莫斯科大学开除,家庭和母校被扒出,自作孽不可活

“精日”学生被莫斯科大学开除,家庭和母校被扒出,自作孽不可活

许三岁
2026-10-22 07:36:48
被古代人的早熟程度震惊了,十几二十几岁他们就已经搅动天下风云

被古代人的早熟程度震惊了,十几二十几岁他们就已经搅动天下风云

夜深爱杂谈
2026-10-14 09:44:40
靠“伪装”赢华为?iPhone Duo“磨砂膜”撕掉,折痕明显

靠“伪装”赢华为?iPhone Duo“磨砂膜”撕掉,折痕明显

老孙说科技
2026-10-23 09:42:58
年入超700万!亚运会冠军陈妤颉疯狂接代言惹争议,运动员该不该过度商业化?

年入超700万!亚运会冠军陈妤颉疯狂接代言惹争议,运动员该不该过度商业化?

可乐谈情感
2026-10-23 10:59:32
车评人韩路谈新款理想i6续航测试:96度电池跑800多公里 还要什么自行车

车评人韩路谈新款理想i6续航测试:96度电池跑800多公里 还要什么自行车

快科技
2026-10-23 10:50:09
台海战争爆发,西方可冻结3.2万亿中国资产,但中国手里也有王炸

台海战争爆发,西方可冻结3.2万亿中国资产,但中国手里也有王炸

黄大姐
2026-10-09 16:30:07
一嫁祝延平,二嫁杜志国,如今老了只剩儿子陪,晚景让人唏嘘不已

一嫁祝延平,二嫁杜志国,如今老了只剩儿子陪,晚景让人唏嘘不已

生命之泉的奥秘
2026-10-23 08:26:18
人民日报评星巴克“消费入座”:一张椅子,照出了多大的问题?

人民日报评星巴克“消费入座”:一张椅子,照出了多大的问题?

亿通电子游戏
2026-10-23 07:17:26
法布雷加斯:4-0时我让球员们停止跑动,这导致丢球,我很后悔;卡里克:我100%为球队的表现负责,责任到我为止

法布雷加斯:4-0时我让球员们停止跑动,这导致丢球,我很后悔;卡里克:我100%为球队的表现负责,责任到我为止

MUREDS
2026-10-23 01:56:54
九旬老人为何睡电梯间?涉房产退休金亲情纠纷…

九旬老人为何睡电梯间?涉房产退休金亲情纠纷…

看看新闻Knews
2026-10-22 23:21:12
2026-10-23 22:28:49
复旦发展研究院 incentive-icons
复旦发展研究院
高端高校智库
4046文章数 1719关注度
往期回顾 全部

科技要闻

抢运营商饭碗!马斯克又有大动作

头条要闻

以总理还原邀特朗普对伊动武细节:你不来 我们自己炸

头条要闻

以总理还原邀特朗普对伊动武细节:你不来 我们自己炸

体育要闻

没人看好的加图索,打出队史最佳开局

娱乐要闻

黎纪君晒与刘恺威合照 恋情后首次同框

财经要闻

叫"保障"不叫"保险":租车平台的文字游戏

汽车要闻

700TOPS算力满血上车 风神L8+正式上市12.99万起

态度原创

教育
家居
旅游
手机
艺术

教育要闻

华南理工大学2027年博士研究生招生章程及招生专业目录

家居要闻

2026建博会(广州) 公装联探展交流活动

旅游要闻

凤瞰潍坊 文脉千秋丨郑板桥纪念馆:竹影清风 古院新声

手机要闻

中国联通开放iPhone Duo现货预约购买,无需验证“尊享挚友”2009年老用户身份

艺术要闻

康熙给法国国王列出的“必读书目”,当今可能没人能读完 !

无障碍浏览 进入关怀版