网易首页 > 网易号 > 正文 申请入驻

单次训练横扫9个基准,遥感检测最大数据集与基础模型框架问世

0
分享至



遥感图像目标检测是一项基础且关键的任务,广泛服务于城市监测、交通分析、海事监管、机场管理、应急救援等重要应用。然而,长期以来,遥感目标检测面临一个核心瓶颈:数据集规模有限、类别体系割裂、传感器和分辨率差异巨大,导致模型往往只能在特定数据集或特定场景下表现良好,难以真正泛化到复杂真实世界。

近日,北京航空航天大学史振威教授和邹征夏教授团队发布了一个面向通用遥感目标检测的大规模数据集与基础模型框架 ——LEVIRDet。该研究构建了目前最大规模、最全面的遥感目标检测数据集 LEVIRDet-159,并在此基础上提出了面向通用遥感检测的基础模型 LEVIRDetNet。

LEVIRDet-159 覆盖 159 个目标类别、包含约 17.4 万张遥感图像、超过 256 万个目标标注框,并在飞机、舰船、车辆等典型遥感目标上提供了约 70 万个细粒度标注。在图像数量、目标实例数量、类别数量等关键维度上,LEVIRDet-159 均超过已有代表性遥感目标检测数据集,为训练真正具备跨场景、跨传感器、跨类别体系泛化能力的遥感检测基础模型提供了新的数据基础。

围绕遥感目标检测中的类别体系不一致、标注框规范不统一、细粒度标签可靠性不足等问题,本项研究构建了一套统一的数据标注引擎。通过紧致水平框标注、多层级类别体系、源盲细粒度复标和全图一致性校验,LEVIRDet-159 将来自不同卫星、航空平台和地图服务的遥感数据统一到一个标准化检测协议下。

在严格的 target-training-free cross-benchmark 评测设置下,LEVIRDetNet 在 LEVIRDet-159 上仅通过单次训练,即可直接在 9 个外部遥感目标检测基准上取得 SOTA 水平;即使在没有外部数据集微调的条件下,也可实现相比最强竞争方法平均提升 5.02 mAP 的效果。



  • 论文标题:LEVIRDet: A Million-Scale 159-Category Dataset and Foundation Model for Universal Remote Sensing Object Detection
  • 论文链接:https://arxiv.org/abs/2606.25312
  • 代码链接:https://qinzheyang.github.io/LEVIRDet/



为什么遥感检测需要一个 “基础模型”?

过去几年,通用视觉领域已经出现了大量基础模型,但在遥感目标检测中,模型泛化仍然非常困难。原因在于,遥感图像与自然图像相比具有更强的尺度变化、更密集的小目标、更复杂的成像来源,以及更不统一的类别体系。

例如,同样是 “飞机”,在高分辨率机场图像中可以进一步区分为不同机型,而在低分辨率图像中可能只能可靠识别为 “飞机” 这一父类。类似地,船舶、车辆等目标也存在大量细粒度类别,但其可辨识程度高度依赖地面采样距离、目标尺寸和图像质量。

因此,遥感检测模型不能只依赖更大的网络或更多的数据,还需要在模型结构中显式建模遥感图像的物理尺度、场景密度和语义层级关系。这也是 LEVIRDetNet 的核心出发点:把遥感图像中的尺度、密度和层级类别信息放进同一个端到端检测框架。

LEVIRDet-159:不只是 “大”,

更是 “统一” 和 “细粒度”

LEVIRDet-159 的一个核心特点是大规模、多源、统一协议和多层级类别体系并重。

该数据集包含 174,488 张图像、超过 1735 亿像素、2,563,973 个目标实例,覆盖 30 个常见遥感父类和 159 个目标类型。其中,细粒度分支包括 45 类飞机、13 类车辆和 71 类舰船,使其不仅是一个通用遥感检测数据集,也是一个多目标族细粒度检测基准。





从目标尺度看,LEVIRDet-159 同时覆盖极小目标、小目标、中等目标和大型结构目标。其中,大量目标尺寸小于 32 像素,能够有效支撑遥感场景中典型的小目标和密集目标检测研究。



从数据来源看,LEVIRDet-159 融合了卫星影像、航空影像、地图服务影像以及多个公开遥感资源,覆盖 SPOT、高分系列、吉林一号、Pleiades、Google/Baidu 地图服务、Bing 影像等多种来源,具有较强的跨平台和跨成像条件多样性。



不过,LEVIRDet-159 的价值并不只是 “把更多数据组合在一起”。团队对原始数据进行了系统化重建:约 148 万个标注框为新增标注,约 85 万个标注框经过几何修正或细粒度重标注。换言之,LEVIRDet-159 是在统一标注规范和语义体系下重新组织、校准和扩展得到的,而不是已有数据集的简单合并。



LEVIRDetNet:面向通用遥感检测的

尺度 - 层级感知基础模型

基于 LEVIRDet-159,团队进一步提出了 LEVIRDetNet,一个面向通用遥感目标检测的尺度 - 层级感知基础模型。

LEVIRDetNet 以端到端检测框架为基础,引入了三个面向遥感场景的关键设计:

第一,在线视觉空间分辨率(Ground Sampling Distance, GSD)预测。遥感图像中,目标在图像中的像素大小与真实物理尺度之间高度相关。LEVIRDetNet 不依赖外部元数据,而是直接从图像内容中预测视觉 GSD,并将其作为模型的尺度条件信号。

第二,GSD 条件化查询调制与动态查询分配。遥感图像既可能包含稀疏的大目标,也可能包含成百上千个密集小目标。LEVIRDetNet 根据图像尺度和场景密度动态调整检测查询,使模型在稀疏场景中减少冗余计算,在密集小目标场景中保留足够检测能力。

第三,层级感知检测头。面对父类与细粒度子类共存的遥感类别体系,传统扁平分类器容易将语义相容的预测视为错误。LEVIRDetNet 通过层级感知分类机制,在训练中同时利用父类、子类和祖先路径信息,使模型能够更好地处理混合粒度标注,并兼容常规平面类别评测。

这些设计使 LEVIRDetNet 不仅 “看得多”,也能更好地理解遥感图像中的尺度变化、目标密度和类别层级结构。



直接横扫 9 个外部基准

为了验证模型的真实泛化能力,团队采用了严格的 target-training-free cross-benchmark 评测设置:模型只在 LEVIRDet-159 上训练一次,随后直接测试在 9 个外部遥感目标检测基准上,不使用目标数据集的训练图像、标注或微调。

这一设置比常规监督评测更加严格。常规方法通常需要在每个目标数据集上重新训练或微调,而 LEVIRDetNet 则以单一模型、单套权重直接迁移到不同数据集。

结果显示,LEVIRDetNet 在 9 个外部基准上均取得第一名,平均主指标 AP 达到 80.56%,相比最强的全监督竞争方法平均提升 5.02 mAP。在与开放集检测和 grounding 模型的对比中,LEVIRDetNet 也展现出更稳定的精确率和召回率,特别是在实际应用常用的置信度阈值下表现更可靠。

这说明,LEVIRDetNet 并不是在单一数据集上 “刷榜”,而是在跨类别体系、跨空间分辨率、跨传感器平台的复杂设置下,展现出遥感检测基础模型应有的泛化能力。







遥感目标检测迈向 “通用模型” 阶段

LEVIRDet 的发布,标志着遥感目标检测正在从 “小规模专用数据集 + 单任务模型” 的阶段,走向 “大规模统一数据体系 + 通用基础模型” 的新阶段。

对于科研社区而言,LEVIRDet-159 提供了一个覆盖类别更广、标注更密集、来源更多样、协议更统一的大规模数据基础。对于模型研究而言,LEVIRDetNet 展示了如何将遥感领域知识融入检测基础模型,包括 GSD、场景密度、目标尺度和类别层级等关键因素。

未来,随着完整图像、标注、源许可证清单、代码和训练模型的开放,LEVIRDet 有望进一步推动通用遥感目标检测、细粒度遥感识别、跨域遥感解译和遥感视觉基础模型的发展。

在真实地球观测场景中,模型需要面对的从来不是单一数据集,而是多源、多尺度、多类别、多任务并存的复杂世界。LEVIRDet 的目标,正是让遥感目标检测模型从 “适配一个基准”,走向 “理解真实世界”。

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
社评:拆空调找稀土,不仅仅是个国际笑话

社评:拆空调找稀土,不仅仅是个国际笑话

环球网资讯
2026-07-06 00:25:05
平安归来的凯特被威廉紧拥在怀,夏洛特喜极而泣,乔治路易乐开花

平安归来的凯特被威廉紧拥在怀,夏洛特喜极而泣,乔治路易乐开花

记录生活日常阿蜴
2026-07-06 10:14:46
100km/h熟睡带俩娃?特斯拉驾驶员监控系统存在识别盲区

100km/h熟睡带俩娃?特斯拉驾驶员监控系统存在识别盲区

CNMO科技
2026-07-06 23:14:03
湖北单亲妈妈嫁65岁美国老头,带儿子移民美国,婚后14年老头去世

湖北单亲妈妈嫁65岁美国老头,带儿子移民美国,婚后14年老头去世

哄动一时啊
2026-02-09 16:56:31
调任市局穿便装食堂吃饭,被厨师骂眼瞎,下午开会我坐到了正中间

调任市局穿便装食堂吃饭,被厨师骂眼瞎,下午开会我坐到了正中间

千秋文化
2026-07-04 19:24:06
600885,被精准“抄底”:新股东投资17.8亿元,3个月不到浮盈11.6亿元!但公司公告出现低级错误

600885,被精准“抄底”:新股东投资17.8亿元,3个月不到浮盈11.6亿元!但公司公告出现低级错误

每日经济新闻
2026-07-06 18:57:06
答王小鲁:为什么不能提高收入拉动消费,却非要继续投资?

答王小鲁:为什么不能提高收入拉动消费,却非要继续投资?

火星宏观
2026-07-05 22:47:56
“被严重低估”的福建第一城:曾经没什么存在感,如今已成功逆袭

“被严重低估”的福建第一城:曾经没什么存在感,如今已成功逆袭

刘小顺
2026-07-06 19:17:09
马竞神锋熄火,阿根廷没了小蜘蛛,卫冕希望还有多大?

马竞神锋熄火,阿根廷没了小蜘蛛,卫冕希望还有多大?

凡人说体育
2026-07-06 07:03:10
农历5月财运飙涨!这4个生肖人品正性子稳,闷声赚大钱

农历5月财运飙涨!这4个生肖人品正性子稳,闷声赚大钱

温暖心语
2026-07-05 10:25:09
34岁内马尔洒泪退出国家队:我尽力了,从这里开始也从这里结束

34岁内马尔洒泪退出国家队:我尽力了,从这里开始也从这里结束

全景体育V
2026-07-06 07:49:12
最大靠山倒台!扎卢日内当面宣战,泽连斯基下手?俄方:和平没戏

最大靠山倒台!扎卢日内当面宣战,泽连斯基下手?俄方:和平没戏

黑鹰观军事
2026-07-06 14:38:03
妻子说在公司加班,酒店前台突然来电:您太太的项链落在房间了

妻子说在公司加班,酒店前台突然来电:您太太的项链落在房间了

千秋文化
2026-07-03 19:08:52
光伏板遮住了沙漠最致命的东西,地表温度降了十几度后 沉睡了百年的荒漠竟然长出了草

光伏板遮住了沙漠最致命的东西,地表温度降了十几度后 沉睡了百年的荒漠竟然长出了草

三农老历
2026-07-06 19:39:05
笑死我了!哈兰德原本想脱衣庆祝,这一憋,把五星巴西送回家

笑死我了!哈兰德原本想脱衣庆祝,这一憋,把五星巴西送回家

涵有话说
2026-07-06 10:40:43
最大风力17级以上!超强台风“巴威”逼近!深圳天气将……

最大风力17级以上!超强台风“巴威”逼近!深圳天气将……

新浪财经
2026-07-06 10:59:55
广西洪涝灾害致2人死亡

广西洪涝灾害致2人死亡

界面新闻
2026-07-06 21:53:55
马丁内斯:很遗憾这么早就踢西班牙,这本该是决赛级别的较量

马丁内斯:很遗憾这么早就踢西班牙,这本该是决赛级别的较量

懂球帝
2026-07-06 08:25:17
喜马拉雅一妻多夫制,夜里轮流陪,女人崩溃吐实:每一天都是折磨

喜马拉雅一妻多夫制,夜里轮流陪,女人崩溃吐实:每一天都是折磨

凉了时光人
2026-06-29 10:45:32
6个月确诊“婴儿渐冻症”,医生说最多活18个月,外公外婆9年陪伴,如今上二年级,考全班第一

6个月确诊“婴儿渐冻症”,医生说最多活18个月,外公外婆9年陪伴,如今上二年级,考全班第一

婚姻与家庭
2026-06-30 09:25:25
2026-07-06 23:56:49
机器之心Pro incentive-icons
机器之心Pro
专业的人工智能媒体
13450文章数 142689关注度
往期回顾 全部

科技要闻

你在笑机器人摔跤,工程师在想怎么不砸死人

头条要闻

19岁大学生立遗嘱将2000万财产留给发小 原因令人唏嘘

头条要闻

19岁大学生立遗嘱将2000万财产留给发小 原因令人唏嘘

体育要闻

世界杯最强17岁,贝林厄姆主动和他交换球衣

娱乐要闻

继床照后,司晓迪再爆鹿晗亲密视频

财经要闻

特朗普,从“霸凌全班”到“克己复礼”

汽车要闻

重新定义出行美学 吉利银河TT首发亮相/或8月上市

态度原创

教育
手机
时尚
公开课
军事航空

教育要闻

南京中考六合区考的怎么样?

手机要闻

好消息:小米18 Pro Max规格大曝光!坏消息:老机型涨价了!

5元一条,偷拍女性已经产业化了

公开课

李玫瑾:为什么性格比能力更重要?

军事要闻

俄乌冲突再升级 康斯坦丁诺夫卡成争夺焦点

无障碍浏览 进入关怀版