网易首页 > 网易号 > 正文 申请入驻

预测误差降低12.3%,多车协同预测框架CMP,破解自动驾驶视线盲区

0
分享至


2025 年 3 月,加州大学河滨分校与密歇根大学、加州大学伯克利分校以及华盛顿大学联合团队在机器人领域顶级期刊《IEEE Robotics and Automation Letters》发表最新研究成果 ——CMP(Cooperative Motion Prediction),首次提出一种面向车联网(V2X)的协同运动预测框架,通过多车信息共享与融合,显著提升自动驾驶车辆的轨迹预测精度与场景适应能力。该技术已在真实场景数据集 V2V4Real 和仿真平台 OPV2V 中验证其高效性,相比现有最优模型,预测误差降低 12.3%,为复杂交通环境下的自动驾驶安全决策提供了全新解决方案。

  • 论文标题:CMP: Cooperative Motion Prediction with Multi-Agent Communication
  • 论文链接:https://arxiv.org/pdf/2403.17916
  • 项目网站:https://cmp-cooperative-prediction.github.io
  • 代码开源:https://github.com/tasl-lab/CMP

技术亮点:感知 - 预测一体化协同,破解自动驾驶 “视线盲区”

传统自动驾驶系统依赖单车传感器,易受遮挡或极端天气影响,导致感知与预测能力受限。CMP 通过多车协同感知与预测的深度融合,打破单车信息孤岛,实现 “全局视野” 与 “动态推理” 的双重突破:

1. 高效协同感知

  • LiDAR 数据共享与压缩:利用 256 倍压缩率的鸟瞰图(BEV)特征传输,带宽需求从 82.5 MB/s 降至 0.32 MB/s,兼顾通信效率与感知精度。
  • 延迟鲁棒性:支持 100ms 内通信延迟,通过时空对齐与多帧同步处理,确保数据在动态场景下的有效性。

2. 动态轨迹预测

  • 多模态预测解码器:基于 Transformer 架构,结合高斯混合模型(GMM),生成多样化的未来轨迹假设,覆盖车辆转向、避让等多种行为模式。
  • 实时预测聚合:通过注意力机制动态整合多车预测结果,优先采纳邻近车辆的可靠预测,进一步提升长时预测(5 秒)的准确性。

一.研究背景

自动驾驶技术的核心在于对环境的精准感知与未来轨迹的可靠预测。然而,传统系统依赖单车传感器(如 LiDAR、摄像头),存在视野受限、易受遮挡的固有缺陷 —— 例如,城市路口被建筑物遮挡的车辆、高速场景中的突然切入目标,仅凭单车感知极易出现漏检或误判,导致决策延迟甚至安全事故。为突破这一限制,协同感知(Cooperative Perception)应运而生。通过车联网(V2X)技术,车辆可共享传感器数据,构建全局环境认知。现有研究(如 V2VNet、CoBEVT)已证明,多车协同能显著提升目标检测精度,但这类工作多局限于感知层的信息融合,未深入挖掘协同数据对运动预测的价值。与此同时,单车轨迹预测模型如 MTR,并未考虑多车交互,协同预测。在此背景下,CMP(Cooperative Motion Prediction)应势而生。作为首个感知 - 预测一体化协同框架,CMP 不仅通过高效 BEV 特征共享与压缩技术扩展感知边界,更创新性地引入预测聚合模块,动态融合多车预测结果,在真实通信约束下实现 “全局感知 - 精准预测 - 协同决策” 的闭环,为复杂动态场景中的自动驾驶安全树立新标杆。

二.研究方法:感知 - 预测 - 聚合三阶协同框架

CMP 以多车协同感知为基础、动态轨迹预测为核心、预测聚合优化为闭环,构建了一套完整的三阶协同框架,其技术路径如下:

1. 协同感知:多车 LiDAR 数据的高效融合

目标:突破单车感知盲区,构建全局环境表征。

  • BEV 特征提取与压缩:

采用改进版 CoBEVT 作为骨干网络,将每辆车的 LiDAR 点云转换为鸟瞰图(BEV)特征(分辨率 0.4m×0.4m),通过卷积自编码器进行 256 倍压缩,带宽需求从 82.5 MB/s 降至 0.32 MB/s,满足车规级通信要求。

  • 时空对齐与延迟补偿:

基于 GPS 同步时钟,设计 100ms 通信窗口,通过可微分空间变换算子(STO)对齐多车坐标系,动态丢弃超时数据,解决车辆运动与通信延迟导致的特征错位问题。

  • 跨车特征融合:

利用 FuseBEVT 模块聚合多车 BEV 特征,结合轻量化检测头输出 3D 目标框,检测精度(AP@0.7)达 0.82,较单车间步长提升 24%。

  • 多物体跟踪:

对于检测出的物体,场景中每一台 CAV 独自使用基于 AB3DMOT 的跟踪算法进行跟踪。

2. 轨迹预测:多模态 Transformer 解码器

目标:基于历史轨迹与场景上下文,生成多样化的未来轨迹假设。

  • 场景编码与意图建模:

引入 MTR 模型框架,通过 Polyline 编码器提取车辆轨迹特征,ViT 编码器提取高精地图语义,结合 Transformer 融合局部交互与全局意图。

  • 动态意图点聚类:

采用 k-means 对历史轨迹终点聚类,生成 64 个意图点(Intention Points),表征转向、直行、停车等多模态目标。

  • 高斯混合轨迹生成:

通过 Transformer 解码器迭代优化轨迹,输出高斯混合模型(GMM)参数,覆盖未来 5 秒内位置分布(均值 μ、方差 σ、相关性 ρ),支持概率化多模态预测。

3. 预测聚合:注意力驱动的协同优化

目标:整合多车预测结果,抑制单视角误差,提升全局一致性。

  • 跨车预测对齐:

将各车的 GMM 参数、局部地图与 BEV 特征拼接为统一输入,通过 MLP 编码为联合特征向量。

  • 多层注意力融合:

设计 8 头 - 5 层 Transformer 架构,动态加权多车预测置信度(如邻近车辆预测权重更高),自适应补偿通信丢包或遮挡导致的预测缺失。

  • 端到端联合训练:

采用多任务损失函数,同步优化检测(Focal Loss + L1 Loss)、预测(NLL + L2 Loss)与聚合模块,避免误差跨阶段累积。

技术对比:CMP 的创新突破

CMP 通过感知 - 预测联合建模与轻量化通信设计,首次在真实车联网约束下实现多车协同运动预测,为复杂动态场景的自动驾驶决策提供了可靠技术底座。

三.实验结果和分析:协同驱动预测精度全面突破

CMP 在 OPV2V(仿真)与 V2V4Real(真实场景)两大数据集上进行了系统性验证,涵盖感知、跟踪、预测全链路性能评估,并与 V2VNet、CoBEVT 等前沿模型对比,核心结论如下:

1. 运动预测:长时误差降低 19%

在 5 秒长时预测任务中,CMP 凭借协同感知 - 预测联合优化,显著优于现有方案 V2VNet:

关键发现:

  • 协同感知贡献显著:仅启用协同感知(不叠加预测聚合),预测误差较无协同降低 10%-15%,证明多车数据融合可有效扩展感知边界。
  • 预测聚合增益突出:引入跨车预测聚合模块后,误差进一步降低 5%-8%,凸显多视角预测互补的价值。
  • 真实场景优势更大:V2V4Real 中 CMP 的 minFDE₆相对提升达 19%,表明其对遮挡、复杂交互的强适应能力。
  • 大范围场景效果更明显:进一步根据 CAV 在场景中的散布显示,随着协同车辆覆盖区域扩大(>200 m²),CMP 的预测精度提升高达 28.4%,充分验证其在大范围复杂场景中的优势。

2. 感知与跟踪:高压缩率下的精度保持

CMP 在保证通信效率的同时,维持了高精度感知与稳定跟踪:

关键发现:

  • 高效压缩可行性:256 倍 BEV 特征压缩几乎不会导致检测精度下降,验证轻量化通信设计的有效性。
  • 跟踪鲁棒性提升:多车协同减少漏检与 ID 切换,MOTA 提升 15%-25%,为长时预测提供更完整的历史轨迹输入。

3. 通信效率与延迟鲁棒性

CMP 在真实通信约束下仍保持稳定性能:

  • 计算速度:CMP 中所有计算部分可以在 100ms 完成,符合业界无人驾驶需求。
  • 带宽需求:单车间 BEV 传输带宽从 82.5 MB/s(原始)降至 0.32 MB/s(256× 压缩),支持 10 车协同场景实时通信。

4. 可视化分析:遮挡场景预测优势

如图所示,单车(红色)感知因视野受限漏检右侧车辆,导致缺少对于一些车辆的轨迹。而 CMP 通过协同感知补全被遮挡目标,且预测轨迹与真值高度吻合。

四.总结:协同预测开启自动驾驶新范式

CMP 通过感知 - 预测 - 聚合全链路协同,在通信效率、延迟鲁棒性、预测精度三大维度实现突破,为复杂动态场景下的自动驾驶提供了可靠技术方案。未来,团队将进一步探索端到端可微分架构与多模态融合,推动协同自动驾驶迈向更高阶智能。随着 V2X 技术的普及,CMP 有望成为下一代自动驾驶系统的核心模块,为智慧交通与无人驾驶规模化落地奠定技术基石。

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
清明将至,俗话说:“坟头三不动,一动穷三代”今年应如何祭祖?

清明将至,俗话说:“坟头三不动,一动穷三代”今年应如何祭祖?

磊子讲史
2026-03-20 16:07:07
燃气调价通知

燃气调价通知

孝感汇
2026-03-25 16:38:10
小毛打酱油 浙江双煞快废了!于金永该让位姚浩洋 依木兰眼神太狠

小毛打酱油 浙江双煞快废了!于金永该让位姚浩洋 依木兰眼神太狠

刀锋体育
2026-03-26 10:43:52
态度180度大转变!外媒集体改口:中国已在三大关键领域强势崛起

态度180度大转变!外媒集体改口:中国已在三大关键领域强势崛起

大卫聊科技
2026-03-26 13:11:34
昨天杭州有医院门诊突然多了不少“跑友”,主动要求检查心脏功能!医生:长期跑步不等于心肺功能没问题

昨天杭州有医院门诊突然多了不少“跑友”,主动要求检查心脏功能!医生:长期跑步不等于心肺功能没问题

都市快报橙柿互动
2026-03-26 08:00:05
江西女硕士失踪,被发现时已在教授实验室待6年,魔鬼真的存在

江西女硕士失踪,被发现时已在教授实验室待6年,魔鬼真的存在

灿烂夏天
2025-02-10 20:20:13
巴拿马接手港口仅一个月,中远海运集运宣布恢复中东六国新订舱业务!

巴拿马接手港口仅一个月,中远海运集运宣布恢复中东六国新订舱业务!

趣味萌宠的日常
2026-03-26 14:04:01
美军全球调兵、要打地面战争?伊朗:要给特朗普一个“巨大惊喜”

美军全球调兵、要打地面战争?伊朗:要给特朗普一个“巨大惊喜”

野史日记
2026-03-25 10:00:12
四川高县村支书暴打残疾村妇致轻伤 法院判决免于刑事处罚引争议

四川高县村支书暴打残疾村妇致轻伤 法院判决免于刑事处罚引争议

律法刑道
2026-03-26 10:55:03
女娲的传说藏了一个远古秘密,虽然后人不愿承认,但的确真实存在

女娲的传说藏了一个远古秘密,虽然后人不愿承认,但的确真实存在

铭记历史呀
2026-03-25 13:00:36
英国上将揭露:1997年香港回归真相,谁敢抗衡中国解放军?

英国上将揭露:1997年香港回归真相,谁敢抗衡中国解放军?

老范谈史
2026-03-18 23:51:08
稳居西部第二!马刺三大年轻核心,已成联盟无解难题!

稳居西部第二!马刺三大年轻核心,已成联盟无解难题!

田先生篮球
2026-03-26 14:23:29
逃亡沙特不久,马步芳强取亲侄女为妻,蒋介石:他让我颜面尽失

逃亡沙特不久,马步芳强取亲侄女为妻,蒋介石:他让我颜面尽失

史笔似尘钩
2026-03-17 20:35:07
世预赛欧洲区开打!明晨将有8队出局 8队进决赛 意大利生死战

世预赛欧洲区开打!明晨将有8队出局 8队进决赛 意大利生死战

叶青足球世界
2026-03-26 08:47:10
“我的部长同学进去了”

“我的部长同学进去了”

霹雳炮
2026-03-21 16:58:17
1955年蒋介石想吃奉化老家的黄花泥螺,保密局知道后如何搞到的?

1955年蒋介石想吃奉化老家的黄花泥螺,保密局知道后如何搞到的?

铜臭的历史味
2026-03-16 13:05:54
广东男篮最新动态!杜峰回怼记者发言引不满,胡明轩被批不配顶薪,徐杰状态回归

广东男篮最新动态!杜峰回怼记者发言引不满,胡明轩被批不配顶薪,徐杰状态回归

凯丰侃球
2026-03-26 11:20:03
最早发现伟人才华的3人是谁?其中一人:想救国,必重用毛泽东

最早发现伟人才华的3人是谁?其中一人:想救国,必重用毛泽东

那年的春夏
2024-11-15 22:43:54
特朗普:对伊朗打击未获国会授权,仅为军事行动,不是战争

特朗普:对伊朗打击未获国会授权,仅为军事行动,不是战争

观世环球
2026-03-26 12:50:25
先被里瓦尔多全面逆袭,后遭齐达内强势碾压,全能战士时运不济

先被里瓦尔多全面逆袭,后遭齐达内强势碾压,全能战士时运不济

足篮大世界
2026-03-26 10:52:09
2026-03-26 15:20:49
机器之心Pro incentive-icons
机器之心Pro
专业的人工智能媒体
12604文章数 142593关注度
往期回顾 全部

科技要闻

Meta高管狂分百亿期权,700名员工却下岗

头条要闻

担心特朗普突然停战 以总理下令48小时尽力摧毁伊设施

头条要闻

担心特朗普突然停战 以总理下令48小时尽力摧毁伊设施

体育要闻

35岁替补门将,凭什么入选英格兰队?

娱乐要闻

张雪峰家人首发声 不设追思会丧事从简

财经要闻

黄仁勋:芯片公司的时代已经结束了

汽车要闻

一汽奥迪A6L e-tron开启预售 CLTC最大续航815km

态度原创

本地
游戏
手机
时尚
健康

本地新闻

救命,这只酱板鸭已经在我手机复仇了一万遍

外媒锐评PS去年错得离谱!发行商排名21 被微软甩开

手机要闻

存储涨价苦了国产品牌、普通消费者,苹果却不受影响

2026年了,最好看的还是“这件针织”!

转头就晕的耳石症,能开车上班吗?

无障碍浏览 进入关怀版