网易首页 > 网易号 > 正文 申请入驻

小目标检测:AI在16×16像素里找人的魔幻现实

0
分享至

自动驾驶的摄像头里,100米外的行人只占16×16像素——比微信头像的缩略图还小。2023年COCO数据集基准测试显示,小目标检测的平均精度(mAP)比常规目标低37个百分点。这不是算法偷懒,是物理极限在作祟。

小目标的定义本身就很刁钻:在640×480的图像中,宽高小于32像素的物体就算"小"。换算到4K视频里,这个阈值可能只有原图的0.05%。更麻烦的是,这类目标往往伴随着低分辨率、遮挡、噪声三重debuff。医学影像中的早期肺结节、卫星图里的非法渔船、工厂流水线上的微裂纹,都卡在这个技术死结上。

特征消失的数学诅咒

卷积神经网络(CNN)每下采样一次,特征图就缩一半。经过4次池化后,原图里32×32的目标只剩2×2——连卷积核都铺不满。ResNet-50的最后一个特征层,单个神经元对应的感受野是483×483像素,相当于用渔网捞细菌。

特征金字塔网络(FPN)试图解决这个问题,把浅层细节和深层语义拼接。但浅层特征的语义太弱,深层特征的位置又太糙。2022年AAAI的一篇论文指出,FPN对小目标的提升有限,因为不同层之间的语义鸿沟比想象中更深。

数据增强是另一条路。复制-粘贴小目标到随机位置、Mosaic拼接四张图、随机缩放……这些方法把COCO小目标AP拉高了2-3个点。但增强过头会引入虚假纹理,模型学到的可能是"伪影检测"而非"目标检测"。

超分重建的迂回战术

有人换个思路:既然看不清,就先放大。生成对抗网络(GAN)和扩散模型被用来超分辨率重建小目标区域,再喂给检测器。2021年的一项研究显示,这种"先超分后检测"的流水线在遥感图像上把召回率提了11%。

代价是计算量翻倍。超分模型本身就需要GPU推理,实时性直接崩盘。自动驾驶场景里,30ms的延迟可能意味着3米的刹车距离——够撞上一辆突然变道的摩托车。

更隐蔽的问题是域偏移。超分模型在高清人脸数据集上训练,用到红外夜视场景里,重建出的"高清细节"可能是幻觉。军事侦察中,把石头超分成坦克的代价,比漏检更高。

Transformer的降维打击

ViT(视觉Transformer)把图像切成patch,用自注意力机制全局建模。对小目标来说,这意味着16×16的patch可能刚好包住一个目标,避免了CNN层层下采样的信息损耗。

2023年的DETR变体Deformable DETR,用可变形注意力聚焦稀疏位置,计算效率追上YOLO。在VisDrone无人机数据集上,它对20×20以下目标的检测精度比Faster R-CNN高19%。

但Transformer的预训练需要海量数据。医学小目标检测的标注成本极高——一个放射科医生标注一张CT的肺结节需要20分钟,而训练ViT需要百万级样本。小数据场景下,CNN+传统增强仍是更务实的选择。

多模态的作弊码

激光雷达(LiDAR)和毫米波雷达给视觉打补丁。点云没有"分辨率"概念,100米外的行人反射几十个点,足够定位。2023年特斯拉的Occupancy Network,把视觉和雷达特征统一到3D体素空间,理论上消除了"小目标"问题——因为一切都被还原到物理尺度。

多模态的坑在于传感器同步和标定。摄像头60fps,激光雷达10Hz,时间差50ms,高速场景里目标已经位移了1.4米。融合算法的复杂度,让量产车型的算力预算频频告急。

一位自动驾驶算法工程师在知乎写道:「我们现在对小目标的策略是'宁可错杀'——提高召回率,用跟踪算法滤除抖动假阳性。精度换安全,这是工程上的妥协。」

小目标检测的终极解法,会不会是抛弃"检测"这个范式本身?端到端的世界模型直接预测"这里有个危险物体",而不需要画框分类——就像人类余光瞥见异动,根本来不及数像素。

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
中美日一季度GDP差距断崖,美国7.32万亿,日本1.02万亿,中国呢

中美日一季度GDP差距断崖,美国7.32万亿,日本1.02万亿,中国呢

青烟小先生
2026-04-11 10:29:33
锂电牛股净利狂增275倍,股价半年飙涨163%

锂电牛股净利狂增275倍,股价半年飙涨163%

21世纪经济报道
2026-04-11 09:11:51
“尼特族”已达2.6亿,比啃老还令人唾弃,离开父母他们会咋样呢

“尼特族”已达2.6亿,比啃老还令人唾弃,离开父母他们会咋样呢

音乐时光的娱乐
2026-04-11 11:42:45
巴顿孙子走进乌克兰指挥中心:每一次击杀都在大屏直播

巴顿孙子走进乌克兰指挥中心:每一次击杀都在大屏直播

桂系007
2026-04-11 00:11:11
《浪姐7》让人尴尬的几位嘉宾,虚伪、装嫩、惹人厌,不要再来了

《浪姐7》让人尴尬的几位嘉宾,虚伪、装嫩、惹人厌,不要再来了

翰飞观事
2026-04-04 14:48:10
罪有应得!官方彻查后,闫学晶再迎噩耗,她最担心的事还是发生了

罪有应得!官方彻查后,闫学晶再迎噩耗,她最担心的事还是发生了

奇思妙想草叶君
2026-01-21 22:47:01
半夜十二点,婆婆发圈毁了儿子的婚姻,儿子:您没老伴也别害我啊

半夜十二点,婆婆发圈毁了儿子的婚姻,儿子:您没老伴也别害我啊

清水家庭故事
2026-04-10 14:23:24
美国网友:如果中国这么伟大,为什么从来没有发明过任何东西?

美国网友:如果中国这么伟大,为什么从来没有发明过任何东西?

混沌录
2026-04-08 16:54:13
刘德华12岁女儿首度亮相演唱会,笑容甜美,气质不输圈内顶流明星,神似16岁的刘亦菲

刘德华12岁女儿首度亮相演唱会,笑容甜美,气质不输圈内顶流明星,神似16岁的刘亦菲

二妹扯娱
2026-04-11 13:13:15
蓝莓被点名!医生:糖尿病患者常吃蓝莓,很快或迎来这些后果

蓝莓被点名!医生:糖尿病患者常吃蓝莓,很快或迎来这些后果

今日养生之道
2026-04-11 13:05:14
中央曾经内定的台湾省委书记,是他…

中央曾经内定的台湾省委书记,是他…

年代回忆
2026-04-09 20:07:20
广东一男子帮弟弟刷脸认证微信号,致他人充值了9万余元的游戏账号被盗,法院:判处有期徒刑十个月,缓刑一年

广东一男子帮弟弟刷脸认证微信号,致他人充值了9万余元的游戏账号被盗,法院:判处有期徒刑十个月,缓刑一年

环球网资讯
2026-04-11 11:14:06
参观洋山港后,郑丽文一句话,将赖清德一军,蓝营又有一人支持

参观洋山港后,郑丽文一句话,将赖清德一军,蓝营又有一人支持

DS北风
2026-04-09 15:22:19
奉陪到底,中方专机抵朝前,朝鲜亮出集束弹头,日韩防长紧急通话

奉陪到底,中方专机抵朝前,朝鲜亮出集束弹头,日韩防长紧急通话

共工之锚
2026-04-10 01:25:50
封锁6周,超2万海员被困船上:同事死去,不得不与遗体共处一船;物资短缺,有人已出现“精神崩溃”,还有人辞职并拒绝穿越霍尔木兹海峡

封锁6周,超2万海员被困船上:同事死去,不得不与遗体共处一船;物资短缺,有人已出现“精神崩溃”,还有人辞职并拒绝穿越霍尔木兹海峡

每日经济新闻
2026-04-11 11:12:13
美国第一夫人发声后 国会称将就爱泼斯坦案举行听证会

美国第一夫人发声后 国会称将就爱泼斯坦案举行听证会

财联社
2026-04-11 14:14:18
七座逃生大桥全被炸断,数万真主党被前后锁死:以军司令下令总攻

七座逃生大桥全被炸断,数万真主党被前后锁死:以军司令下令总攻

阿芒娱乐说
2026-04-10 18:01:11
江苏省挂号费最贵的十位医生

江苏省挂号费最贵的十位医生

华庭讲美食
2026-04-10 12:09:24
悲催!网传有女生举报送桶装水的大爷进出女宿舍,现抱怨搬水太累

悲催!网传有女生举报送桶装水的大爷进出女宿舍,现抱怨搬水太累

火山詩话
2026-04-10 11:12:20
新冠后遗症的长期侵袭,无数人在不知不觉中深陷困境

新冠后遗症的长期侵袭,无数人在不知不觉中深陷困境

律法刑道
2026-04-01 10:15:47
2026-04-11 15:40:49
薛定谔的BUG
薛定谔的BUG
有态度网友ytd
1184文章数 32关注度
往期回顾 全部

科技要闻

半夜被燃烧瓶砸醒,OpenAI CEO发文反思

头条要闻

知名巨头CEO在美国的住宅凌晨被投燃烧弹 他发文回应

头条要闻

知名巨头CEO在美国的住宅凌晨被投燃烧弹 他发文回应

体育要闻

换帅之后,他们从降级区冲到升级区

娱乐要闻

浪姐7淘汰 该走的没走,不该走的走了

财经要闻

从日本翻身看:这次谁能扛住高油价?

汽车要闻

焕新极氪007/007GT上市 限时19.39万起

态度原创

本地
手机
数码
房产
公开课

本地新闻

12吨巧克力有难,全网化身超级侦探添乱

手机要闻

小米三款手机今日起正式调价!REDMI K90 Pro Max上涨200元

数码要闻

4月15日见!索尼INZONE英纵电竞外设新品官宣

房产要闻

28条新规落地!好房子,终于有了“广州标准”!

公开课

李玫瑾:为什么性格比能力更重要?

无障碍浏览 进入关怀版