网易首页 > 网易号 > 正文 申请入驻

95FPS 高实时 + 87.2% mAP!MAR-YOLO 攻克�...

0
分享至

来源:市场资讯

(来源:计算机视觉研究院)

计算机视觉研究院


公众号ID|计算机视觉研究院

学习群|扫码在主页获取加入方式

https://pmc.ncbi.nlm.nih.gov/articles/PMC12835050/pdf/41598_2025_Article_33107.pdf

计算机视觉研究院专栏

Column of Computer Vision Institute

本文基于最新旋转检测基线 YOLOv11-OBB,提出一体化协同优化框架 MAR-YOLO,设计 MFAS 自适应特征筛选、改进 AFPN 渐进式特征金字塔、RRD-Head 重参数化旋转检测头三大创新模块,从浅层特征提取、跨尺度融合、旋转框回归全链路同步解决遥感建筑检测三大核心痛点。

PART/1

痛点

高分辨率遥感影像建筑检测长期存在三大相互耦合的核心难点,现有算法只能单独优化单一问题,多问题共存时性能大幅下滑:

:建筑尺寸跨度 8~128 像素,城区建筑密集排布,间距甚至小于网络感受野,小建筑极易漏检;

:非垂直航拍(off-nadir)带来透视畸变,不规则 L/U 型建筑角度回归预测偏差大;

:浅层特征细节丰富、语义弱,深层语义强、空间粗糙,直接拼接易产生语义冲突,误检漏检激增。

现有 YOLO 旋转检测、两阶段旋转 R-CNN、Transformer 检测器均无法同步化解三类问题,为此本文提出MAR-YOLO一体化旋转建筑检测框架,基于 YOLOv11-OBB 做三大协同创新,兼顾检测精度与实时推理速度。

PART/2

创新

整体网络链路:Backbone 骨干 → MFAS 自适应特征筛选 → AFPN 渐进特征金字塔 → RRD-Head 增强旋转检测头


【MAR-YOLO 整体网络结构图】

(一)MFAS 多尺度特征自适应选择模块

传统 YOLO 仅使用 P3/P4/P5 三层特征,缺失浅层细粒度信息;新增 4 倍下采样 P2 层后会引入大量特征冗余。MFAS 以 FocusedLinearAttention(FLA)为核心,采用双域加权机制:

对 P2/P3/P4 添加可学习权重 α₂、α₃、α₄,P5 复用 C2PSA 注意力搭配 α₅权重;

FLA 内置聚焦因子 p=3 强化建筑边缘、角点提取,搭配 5×5 深度卷积捕捉局部结构;

自适应过滤冗余特征,相比单纯叠加 P2 层,参数量涨幅仅 6.9%,mAP50 额外提升 0.6%。


【YOLOv11_P2 骨干与添加 MFAS 后的骨干对比图】

(二)改进型 AFPN 渐进式特征金字塔

传统 FPN 自上而下单层传递,跨尺度直接融合造成严重语义鸿沟,本文对渐近金字塔做建筑专属改造:

:先融合相近尺度 P2-P3,再叠加 P4,最后接入 P5,逐层缩小语义差,避免高低层特征直接冲突;

:P2-P3 融合使用 3×3 卷积保留小建筑细节,P4-P5 融合使用 5×5 卷积捕捉长条建筑轮廓;

:每个空间位置设置可学习融合系数 α、β、γ,动态适配城区建筑疏密变化


【传统 FPN、原始 AFPN、本文改进 AFPN 架构对比图】

(三)基于 RepVGG 重参数化的 RRD-Head 旋转检测头

原有 YOLO 旋转头单路卷积难以学习建筑复杂几何与角度特征,RRD-Head 对分支做任务差异化分工:

三路并行训练分支各司其职:3×3 卷积提取透视畸变下建筑边缘方向特征,1×1 卷积建模通道间角度关联,恒等映射稳定反向传播梯度;

训练时多分支叠加提升特征拟合能力,推理阶段通过重参数化等价转换为单路 3×3 卷积,无额外推理耗时;

专门优化旋转角 θ 回归,大幅降低不规则建筑角度预测漂移问题。


【原始检测头与 RRD-Head 结构对比图】

PART/3

实验

3.1 消融实验:三大模块协同增益明显

基于斜射建筑专用数据集 BONAI 开展逐层消融,验证每个模块独立贡献与协同效果:


【完整消融实验结果表】

  • 仅 MFAS:mAP50+0.5%;仅 AFPN:mAP50+0.9%;仅 RRD-Head:mAP50+0.6%;

  • 三者组合完整 MAR-YOLO 相比 YOLOv11s-OBB 基线,mAP50 提升 2.9%、mAP50-95 提升 2.6%,参数量 14.26MB,推理速度稳定 95FPS,兼顾轻量化与实时性。

特征热力图可视化可直观证明:MAR-YOLO 特征激活集中在建筑实体,背景噪声抑制效果远优于基线模型。


【特征激活热力图对比图】

3.2 主流算法横向对比,全方位碾压 SOTA

在 BONAI、DOTA v1.0、DIOR-R、HRSC2016 四大遥感公开数据集,对比单阶段 YOLO 系列、两阶段旋转检测器、Transformer 旋转 DETR:


【BONAI 数据集主流算法对比表】

对比 YOLOv9s-OBB(同系列最优单阶段):BONAI 数据集 mAP50 高出 1.8%,推理速度 95FPS 是其 1.04 倍;

对比两阶段 Oriented R-CNN:精度更高,速度提升 3.4 倍;

对比 Rotated DETR:mAP50 高出 2.6~3.7%,计算量仅为其 28.7%。

3.3 定性可视化:密集场景漏检大幅减少

选取密集城区建筑、规整建筑群两大高难度场景对比基线 YOLOv11s-OBB:基线模型存在大量小型建筑漏检,MAR-YOLO 检出目标数量接近真值标注,边界与旋转角度拟合更精准。


【检测结果定性对比图】

3.4 跨数据集泛化测试,鲁棒性拉满

在航空多目标 DOTA、光学小目标 DIOR-R、舰船数据集 HRSC2016 上,MAR-YOLO 均稳定取得最优指标:


【多数据集泛化性能验证表】

跨数据集消融结果显示:MFAS 对尺度差异大的建筑场景增益最高,AFPN 全场景稳定增效,RRD-Head 对多角度不规则目标提升显著,证明三大创新解决底层通用检测缺陷,非数据集过拟合。

3.5 失效案例分析:现存局限与优化方向

论文总结三类模型失效场景,为后续研究指明方向:


【典型失效案例标注图】

建筑极端密集、间距极小:特征融合时目标边界融合,出现合并检测框;

大倾角航拍透视畸变:建筑边缘梯度弱化,角度预测出现偏移;

大面积遮挡场景:深层语义覆盖浅层细节,小目标丢失。

PART/4

总结与未来展望

4.1 核心结论

MAR-YOLO 基于 YOLOv11-OBB 搭建 MFAS、改进 AFPN、RRD-Head 三大协同模块,同步解决遥感建筑尺度、旋转、语义融合三大痛点;

BONAI 数据集指标 87.2% mAP50、65.3% mAP50-95,推理 95FPS,平衡高精度与实时落地需求;

四大公开遥感数据集验证强泛化能力,可适配建筑、舰船、飞机等各类旋转遥感目标检测。

4.2 后续研究方向

轻量化知识蒸馏:压缩模型,适配无人机、星载边缘设备部署;

大模型融合:结合视觉语言模型实现零样本罕见建筑检测,扩散模型扩充极端场景数据;

时序扩展:搭建多时相检测框架,实现城市建筑变化自动监测、灾后损毁评估。

有相关需求的你可以联系我们!

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
“秃毛鸡还幻想孵出凤凰?”一场廉价的抓周仪式,令人看清了现实

“秃毛鸡还幻想孵出凤凰?”一场廉价的抓周仪式,令人看清了现实

妍妍教育日记
2026-08-01 09:45:09
中国U20女足1-5朝鲜队,主帅王军:攻守和转换方面都有收获

中国U20女足1-5朝鲜队,主帅王军:攻守和转换方面都有收获

懂球帝
2026-08-05 10:03:23
90后女孩竟一年撸800家网贷,错把借贷当工资:毁掉她的不是贪婪

90后女孩竟一年撸800家网贷,错把借贷当工资:毁掉她的不是贪婪

原广工业
2026-08-02 12:38:23
大雨暴雨明天到!8月中旬到下旬,四川盆地还有3轮高温

大雨暴雨明天到!8月中旬到下旬,四川盆地还有3轮高温

掌上金牛
2026-08-05 09:04:03
《蜘蛛侠:崭新的一天》周一怒砍超4600万美元,刷新影史单日纪录

《蜘蛛侠:崭新的一天》周一怒砍超4600万美元,刷新影史单日纪录

时光慢旅人
2026-08-05 00:21:13
月销十万辆与困守三万辆,汽车新势力淘汰赛愈演愈烈

月销十万辆与困守三万辆,汽车新势力淘汰赛愈演愈烈

华夏时报
2026-08-04 11:24:05
杜兰特怒怼詹迷:你们老急,因为我抢走两个冠军影响他的GOAT履历

杜兰特怒怼詹迷:你们老急,因为我抢走两个冠军影响他的GOAT履历

懂球帝
2026-08-04 16:14:33
别再比养老金了!企业退休分4档,看看你站在哪一档养老金呢!

别再比养老金了!企业退休分4档,看看你站在哪一档养老金呢!

白昼说故事
2026-08-05 11:35:35
河北邯郸这件事,“冯院长看上你了”这一句好讽刺

河北邯郸这件事,“冯院长看上你了”这一句好讽刺

吴女士
2026-08-05 08:56:06
孙颖莎舅舅接机火了!一个动作看哭网友,这才是顶级宠爱!

孙颖莎舅舅接机火了!一个动作看哭网友,这才是顶级宠爱!

手工制作阿歼
2026-08-01 07:27:34
普京果然聪明,用一招极其“恶心”的招数,让乌军付出了很大代价

普京果然聪明,用一招极其“恶心”的招数,让乌军付出了很大代价

小莜读史
2026-08-05 12:15:58
热热热!北京发布高温黄色预警!紧急提醒:若中暑,这些“土法子”不管用

热热热!北京发布高温黄色预警!紧急提醒:若中暑,这些“土法子”不管用

BRTV新闻
2026-08-05 09:44:03
前利物浦教练亲述:从英超冠军到“定位球罪人”,只隔48小时

前利物浦教练亲述:从英超冠军到“定位球罪人”,只隔48小时

体坛观察猿
2026-08-05 12:36:50
女子讨1000多万工程款!遭局长色诱,录下铁证举报,已被停职调查

女子讨1000多万工程款!遭局长色诱,录下铁证举报,已被停职调查

社会日日鲜
2026-08-05 12:41:01
凌晨突击检查!漳州两家娱乐场所被立案,现场画面曝光,让人后怕

凌晨突击检查!漳州两家娱乐场所被立案,现场画面曝光,让人后怕

天气观察站
2026-08-05 03:10:10
炸裂!婚外胚胎的小三越扒越有!小学毕业,她姐也傍大款,父母却引以为傲

炸裂!婚外胚胎的小三越扒越有!小学毕业,她姐也傍大款,父母却引以为傲

小鋭有话说
2026-08-05 11:39:59
中国女排最强阵容是这7个人,以此套班底出战,稳拿亚锦赛冠军!

中国女排最强阵容是这7个人,以此套班底出战,稳拿亚锦赛冠军!

湘村大余
2026-08-04 15:42:05
索尼影业董事长:蜘蛛侠全球首周破9亿美元,电影真的没死,希望荷兰弟继续演

索尼影业董事长:蜘蛛侠全球首周破9亿美元,电影真的没死,希望荷兰弟继续演

影视情报室
2026-08-04 00:20:07
8月5日,2026年养老金调整官宣了吗?20年和40年工龄,涨钱差多少?

8月5日,2026年养老金调整官宣了吗?20年和40年工龄,涨钱差多少?

碎月说
2026-08-05 11:56:09
A股:今天,8月5日,股市再现新变化,释放了两个重要信息!

A股:今天,8月5日,股市再现新变化,释放了两个重要信息!

明心
2026-08-05 11:46:23
2026-08-05 13:48:49
新浪财经 incentive-icons
新浪财经
新浪财经是一家创建于1999年8月的财经平台
4323630文章数 9166关注度
往期回顾 全部

科技要闻

SpaceX首份财报:营收暴涨92%,AI狂烧千亿

头条要闻

女孩身中三十余刀惨死 家属10年后才知凶手改判还活着

头条要闻

女孩身中三十余刀惨死 家属10年后才知凶手改判还活着

体育要闻

41岁C罗观看热身赛晒豪车:我的玩具

娱乐要闻

陈凯琳首回应孩子在电影院吵闹被泼奶油

财经要闻

刷屏的光模块,中国实力几何?

汽车要闻

拉开上汽通用30款新车序幕 别克至境L7纯电将预售

态度原创

家居
数码
手机
公开课
军事航空

家居要闻

2026建博会(广州) 公装联探展交流活动

数码要闻

导购大概率不会告诉你!这两种屏幕技术差距,才是电视画质分水岭

手机要闻

一加手机海外市场清理库存 未来专注国内市场

公开课

李玫瑾:为什么性格比能力更重要?

军事要闻

霍尔木兹海峡能否两日内重开 美伊说法不一

无障碍浏览 进入关怀版