网易首页 > 网易号 > 正文 申请入驻

具身智能狂飙,安全却严重滞后?首个安全可信EAI框架与路线图!

0
分享至



近年来,以人形机器人、自动驾驶为代表的具身人工智能(Embodied Artificial Intelligence, EAI)正以前所未有的速度发展,从数字世界大步迈向物理现实。然而,当一次错误的风险不再是屏幕上的一行乱码,而是可能导致真实世界中的物理伤害时,一个紧迫的问题摆在了我们面前:

如何确保这些日益强大的具身智能体是安全且值得信赖的?

现实情况是,能力与安全,这两条本应齐头并进的轨道,正出现令人担忧的「脱钩」。如图 1 所示,业界的基础模型在能力上飞速迭代,却普遍忽视了与之匹配的安全对齐机制;而学术界虽有探索,但研究成果往往零散、不成体系。



图 1: EAI 的能力与安全发展现状。行业产品(蓝色)能力飞速提升但安全滞后,学术研究(绿色)虽有探索但较为零散。作者团队的研究旨在规划一条通往理想的「安全可信 EAI」(橙线)的道路。

为了弥合这一关键差距,上海人工智能实验室和华东师范大学的研究团队撰写了这篇 Position Paper,旨在为「安全可信具身智能」这一新兴领域建立一个系统性的理论框架与发展蓝图,推动领域从碎片化研究走向整体性构建。



  • 论文标题:Towards Safe and Trustworthy Embodied AI: Foundations, Status, and Prospects
  • 作者团队:Xin Tan, Bangwei Liu, Yicheng Bao, Qijian Tian, Zhenkun Gao, Xiongbin Wu, Zhihao Luo, Sen Wang, Yuqi Zhang, Xuhong Wang, Chaochao Lu, Bowen Zhou
  • 论文链接:https://openreview.net/forum?id=Eu6Yt21Alv
  • 项目主页:https://ai45lab.github.io/Awesome-Trustworthy-Embodied-AI/

本文核心贡献

不同于传统的综述文章,作者不仅梳理现状,更致力于定义概念、构建体系、并探索未来方向。核心贡献如下:

  1. 首次定义新概念:本文正式引入并定义「安全可信具身智能(Safe and Trustworthy EAI)」,将其确立为一个融合了智能体内部可靠性与外部物理世界安全性的整体性研究领域。
  2. 提出首个成熟度模型:创新性地提出「打造安全 EAI (Make Safe EAI)」的五级(L1-L5)成熟度模型。该模型为领域发展提供了第一个清晰的演进路线图,指明了从被动、外部的安全「补丁」到主动、内生的、具备自我进化和可验证能力的安全系统的必经之路。
  3. 构建全面的分析框架:提出一个包含「可信性」「安全性」两大维度、共计十大核心原则的完整框架,并基于此对领域现状进行了系统性梳理。它为系统性地分析风险、归类现有研究、识别关键空白提供了强有力的工具。

L1-L5:安全可信 EAI 的演进路线图

作者认为,真正的安全不是在能力之上的「附加模块」,而是一种与生俱来的核心能力。前者只是安全可信具身的过渡形态,可以称为「Make EAI Safe」;而他们基于 R²AI 中的人工智能安全等级,提出了「Make Safe EAI」的理念,打造内生安全可信的具身智能,并将其划分为五个演进等级,如下图(图 2)所示:



图 2: 打造安全可信具身智能的五级成熟度模型,展示了从基础的抵抗力(L1-L2)到高级的复原力(L3-L5)的演进路径。

  • L1: 对齐 (Alignment) - 基础抵抗力:通过大规模数据驱动训练,使智能体行为符合基本的人类价值观和安全规范。
  • L2: 干预 (Intervention) - 监督下的抵抗力:通过可解释性与人类监督干预机制,确保人类始终处于最高控制位。
  • L3: 模仿反思 (Mimetic Reflection) - 基础复原力:智能体通过模仿和内化经过验证的安全行为模板来学习如何安全地执行任务。
  • L4: 进化反思 (Evolutionary Reflection) - 自适应复原力:智能体具备自我改进机制,通过与物理世界的持续互动,自主学习和优化其安全策略。
  • L5: 可验证反思 (Verifiable Reflection) - 可保证的复原力:智能体的安全性能由控制论等理论提供可验证的、数学上的保证,是安全可信的最高形态。

这套框架的提出并非凭空而来,而是建立在数十年来可信计算领域演进的基础之上。从可信系统,到可信 AI,再到今天关注的安全可信具身 AI,这是一个不断发展的历史进程,如下图(图 3)所示。



图 3: 可信计算的演进时间线,清晰地展示了从紫色(可信系统)、蓝色(可信 AI)到绿色(安全可信具身 AI)的历史脉络。

十大核心原则:系统性风险分析的基石

为了将「安全可信」这一宏观概念落地,作者将其分解为两大维度和十项具体原则,为风险分析与系统设计提供了「标尺」。



图 4: 安全可信 EAI 的十大核心原则概览,分为可信赖性(上排)和安全性(下排)两个维度。

基于此框架,作者对当前的研究趋势进行了定量分析。如下图(图 5)所示,研究发现研究工作主要集中在准确性、可靠性和抗攻击性上,而可审计性、可辨识性等原则仍有待深入探索。





图 5: 当前研究的定量分析。上图为十大原则的层次结构,下图为各原则下研究论文数量的统计,揭示了研究热点与空白。

四大阶段:解构具身智能的工作流与风险

作者将一个具身智能体的工作流解构为四个核心阶段:指令理解、环境感知、行为规划和物理交互。



图 6: 具身智能体的四阶段工作流,展示了从接收用户指令到最终在物理世界执行动作的全过程。

基于此工作流,构建全面的文献分类体系,如下图(图 7)所示,系统性地梳理了在每个阶段、每个原则下的现有研究工作,为研究者提供了清晰的知识图谱。



图 7: 安全可信具身 AI 的文献分类体系总览,详细映射了相关研究工作到本研究的框架中。

孪生模拟器:构建与测试可信智能体的基石

高质量的孪生模拟器是开发可信 EAI 不可或缺的工具,场景的「保真度」「可定制性」和环境的「可编辑性」对此至关重要。



图 8: 评估 EAI 模拟器的关键维度。(A) 场景保真度对比,(B) 从蓝图到 3D 世界的场景定制能力,(C) 模拟复杂交互的环境可编辑性。

未来展望:从孤立优化到整体闭环的控制论范式

作者认为,当前研究的最大瓶颈在于孤立地优化单个组件。要构建真正安全可信的 EAI,必须进行一场范式转移。

他们主张,未来的研究应将智能体视为一个先进的自适应控制系统(Cybernetic System),其 「可信赖」的品质是在与环境和人类的持续动态交互中涌现出来的。



图 9: 作者团队提出的具身智能控制论框架。智能体(Self)、世界(World)和互动(Interaction)构成了一个闭环系统,通过「行动 - 反馈 - 演化 - 协作」的循环,不断涌现出可信赖性。

这一未来的闭环系统建立在三大支柱之上:

  • 世界 (The World):构建高保真、可扩展、可交互的虚拟环境,弥合模拟与现实的鸿沟。如下图(图 10)所示,当前技术难以同时满足这三点,是未来需要攻克的「不可能三角」。



图 10: 现有虚拟环境(左)与理想的虚拟世界(右)的对比。

  • 自我 (The Self):发展能够自我进化的智能体,从「预训练的雕像」转变为能够终身学习的生命体。如下图(图 11)所示,下一代记忆系统将是实现自我进化的核心。



图 11: 实现下一代可进化的具身智能体,红色部分(如主动感知、记忆压缩、记忆编辑与共享)代表亟待发展的关键技术。

  • 互动 (The Interaction):设计无缝的协同架构,整合内部的「身脑协同」、外部的「多智能体协作」与「人机协同」。



图 12: 实现无缝协同的三个关键渠道:内部(身脑)、多智能体和人机互动。

总结

本文不仅是对安全可信具身智能领域的全面梳理,更是一份行动倡议和未来路线图。作者希望通过提出的全新框架、成熟度模型和控制论范式,为社区提供一个统一的语言和共同的目标,共同推动下一代不仅强大,而且从根本上安全、真正值得信赖的具身智能的到来。

欢迎大家阅读论文原文,获取更详细的论述,期待与您交流!

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
主谋竟是泽连斯基密友,美欧担忧援助去向,乌克兰腐败丑闻震动西方

主谋竟是泽连斯基密友,美欧担忧援助去向,乌克兰腐败丑闻震动西方

环球网资讯
2025-11-14 06:45:32
李连杰返老还童越扒越有!好友证实王宁也做了大血净,官媒早披露

李连杰返老还童越扒越有!好友证实王宁也做了大血净,官媒早披露

古希腊掌管月桂的神
2025-11-13 15:23:54
狗咬邻居被摔死后主人上门打砸遭反杀,该案一审未当庭宣判,检方认为被告人系防卫过当

狗咬邻居被摔死后主人上门打砸遭反杀,该案一审未当庭宣判,检方认为被告人系防卫过当

扬子晚报
2025-11-13 22:32:07
影子调查|连云港一公司女职员陪酒之死:赴宴5名镇干部被处理,家属起诉追问死因

影子调查|连云港一公司女职员陪酒之死:赴宴5名镇干部被处理,家属起诉追问死因

澎湃新闻
2025-11-14 12:42:28
超700台光刻机!荷兰ASML公司可能要全部回购?外媒:事情闹大了

超700台光刻机!荷兰ASML公司可能要全部回购?外媒:事情闹大了

大卫聊科技
2025-11-13 13:44:04
全运会乒乓球男团:上海3-0战胜江苏,许昕两战全胜

全运会乒乓球男团:上海3-0战胜江苏,许昕两战全胜

懂球帝
2025-11-14 12:16:38
高市早苗发表涉台错误言论,中方密集发声!

高市早苗发表涉台错误言论,中方密集发声!

上游新闻
2025-11-14 15:11:04
突然爆雷!总部解散,曾宣称“国资背景”,5000名投资者近10亿被套,大多来自亲戚朋友相互推荐

突然爆雷!总部解散,曾宣称“国资背景”,5000名投资者近10亿被套,大多来自亲戚朋友相互推荐

鲁中晨报
2025-11-14 10:55:26
百度AI:熬过“起大早”的孤独,等来时代的奖励

百度AI:熬过“起大早”的孤独,等来时代的奖励

定焦One
2025-11-13 20:07:12
贝克汉姆家陷僵局?大布提出和解条件:除非爸妈给老婆道歉!这...可能吗?

贝克汉姆家陷僵局?大布提出和解条件:除非爸妈给老婆道歉!这...可能吗?

英国那些事儿
2025-11-13 23:27:08
神舟二十号为什么被撞了?权威解读——

神舟二十号为什么被撞了?权威解读——

BRTV新闻
2025-11-06 16:21:50
这里正在发生真正的种族灭绝,他们却开启了休假模式

这里正在发生真正的种族灭绝,他们却开启了休假模式

以色列计划Pro
2025-11-13 21:42:59
母亲称女儿被骗柬埔寨 已怀孕6个月 欲卖房凑20万赎金

母亲称女儿被骗柬埔寨 已怀孕6个月 欲卖房凑20万赎金

大象新闻
2025-11-14 11:22:03
马筱梅直播大方承认:玥儿霖霖被大S教很好!比有的大人还尊重人

马筱梅直播大方承认:玥儿霖霖被大S教很好!比有的大人还尊重人

小娱乐悠悠
2025-11-14 14:49:41
这是真饿了,太阳报:哈兰德赛后买了近70个芝士汉堡请全队吃

这是真饿了,太阳报:哈兰德赛后买了近70个芝士汉堡请全队吃

懂球帝
2025-11-14 12:03:09
49中26!火箭第一神射手!和亚当斯爆发冲突

49中26!火箭第一神射手!和亚当斯爆发冲突

篮球实战宝典
2025-11-14 14:02:07
“狗咬人致命案”新进展:9人砸窗破门误伤自己人,导致妹夫重伤

“狗咬人致命案”新进展:9人砸窗破门误伤自己人,导致妹夫重伤

汉史趣闻
2025-11-13 21:05:13
越南军方内部报告曝光:中国军力强大到让邻国彻底清醒

越南军方内部报告曝光:中国军力强大到让邻国彻底清醒

Hi秒懂科普
2025-11-14 13:06:11
医生被护士骂的理由能有离谱?网友:我一直以为护士是医生的佣人

医生被护士骂的理由能有离谱?网友:我一直以为护士是医生的佣人

解读热点事件
2025-11-13 00:15:03
资金用完!全国多地已暂停汽车报废更新补贴

资金用完!全国多地已暂停汽车报废更新补贴

极目新闻
2025-11-12 22:48:27
2025-11-14 17:28:49
机器之心Pro incentive-icons
机器之心Pro
专业的人工智能媒体
11714文章数 142505关注度
往期回顾 全部

科技要闻

京东“失去的五年”后,找到新增长了吗?

头条要闻

29岁程序员疑被骗至东南亚 出租屋内留下一张神秘纸条

头条要闻

29岁程序员疑被骗至东南亚 出租屋内留下一张神秘纸条

体育要闻

40岁C罗肘击染红 离场时怒骂对手主帅

娱乐要闻

《国色天香》编剧发长文质疑古二?

财经要闻

统计局:前10月房地产开发投资下降14.7%

汽车要闻

小鹏X9超级增程动态评测全网首发 高速实测车内65分贝

态度原创

旅游
艺术
房产
手机
公开课

旅游要闻

观赏期约一个月 成都发布公园城市银杏观叶指南

艺术要闻

伟人写给宋庆龄的信:狂草艺术的巅峰之作

房产要闻

共话产业变革下的投资新思维与新机遇|蓝湾财富论坛精华

手机要闻

天玑霸榜!安兔兔10月安卓次旗舰手机性能榜出炉

公开课

李玫瑾:为什么性格比能力更重要?

无障碍浏览 进入关怀版