网易首页 > 网易数码 > 正文

新技术让红外夜视图中的人脸也能被识别

0
分享至
摘要:红外线监控视频或者是红外线闭路电视的影像所存在的一个问题就是,它难以利用这些图像来识别出人物的身份。面部在红外线成像中看起来会有很大的不同,要将红外线图像与他们正常外观的图像进行匹配是一个尚未解决的挑战。人们的外表在红外线和可见光之间的关系是高度非线性的,红外线其趋向于使用被动传感器来检测人体所散发出来的光线,而不是人体所反射的光线。

如今,德国卡尔斯鲁厄理工学院的 Saquib Sarfraz 和 Rainer Stiefelhagen 表示,他们已经研究出了如何建立中、远程红外面部图像,与对应的可见光图像的关系。他们已经完美的教导神经网络来完成所有的工作。

面部散发红外线的方式,与它反射光线的方式完全不同。散发的红外线与空气的温度和皮肤的温度十分相关,而这些又取决于人体的活动水平,以及人体是否有发烧等情况的影响。

还有一个问题使得红外线图像难以辨认面部:可见光图像具有更高的解析度,而远红外线图像则低得多,这是由摄像机的性质而定的。总之,这些因素使得匹配红外线图像与对应的可见光图像变得很难。

但是近年来深层神经网络在应对各种复杂问题的改善上,给予了 Sarfraz 和 Stiefelhagen 启发。为什么不训练神经网络通过观察红外线版本的图像,从而识别可见光的面部?近年来,两个重要因素的结合使得神经网络变得更加强大。

一是更好地了解如何建立和调整网络来执行任务,这项技术领导了深度神经网络的创建。

二是大型注释的数据集的可用性越来越高,它们可被用来训练神经网络。

将红外线与可见光图像进行比较的数据集很难得到,不过 Sarfraz 和 Stiefelhagen 还是从圣母大学那得到了可用的数据:来自于82人的4585张照片,有分辨率为1600 1200的可见光图像,和分辨率为312 x 239的远红外图像。该数据集包含了人们面带微笑、大笑,以及自然表情的图像,并以两种不同的光线条件来捕捉每天人们的外观变化。

之后,他们将图像分割成像素为20 20的相互重叠的各部分,从而扩充数据库。最后,Sarfraz 和 Stiefelhagen 使用前41个人的图像来训练他们的神经网络,并用另外41个人的图像进行测试。

从测试结果来看,神经网络能够在短短35毫秒内,完成热成像图与其对应的可见光图像的匹配。他们表示:“匹配速度非常得快,能够以28fps的刷新率实时运行。”

但这并不意味着它已趋于完美。测试结果表明,最好的结果其精度也只是刚刚超过80%,而一对一的比较精度仅有55%。

更高的精度显然只有更大的数据集和更强大的网络才能办到,但因此其成本也会更高。不过对这项技术感兴趣的客户,很可能是那些涉及到安全相关的军事、执法机构和政府等,它们并不缺钱。

相关推荐
热点推荐
悬念不大了!本赛季MVP的候选人有10人,但真正有资格的只有这3人

悬念不大了!本赛季MVP的候选人有10人,但真正有资格的只有这3人

毒舌NBA
2025-12-20 09:35:40
越秀南路有两人受伤,广州警方通报:抓获犯罪嫌疑人赵某(男,34岁)

越秀南路有两人受伤,广州警方通报:抓获犯罪嫌疑人赵某(男,34岁)

极目新闻
2025-12-19 23:39:16
1976年9月8日深夜,一通电话让华国锋脸色铁青,连国宴都没顾上就跑了,紧接着抛出的三个难题,差点让政治局吵翻天

1976年9月8日深夜,一通电话让华国锋脸色铁青,连国宴都没顾上就跑了,紧接着抛出的三个难题,差点让政治局吵翻天

寄史言志
2025-12-18 19:09:15
电讯报:若瓜帅离开曼城,将留下堪比弗格森时代结束的大空缺

电讯报:若瓜帅离开曼城,将留下堪比弗格森时代结束的大空缺

懂球帝
2025-12-20 08:48:29
故事:重庆地头蛇文强,600万邀韩国女星喝酒,强行灌醉与其共度良宵

故事:重庆地头蛇文强,600万邀韩国女星喝酒,强行灌醉与其共度良宵

红豆讲堂
2025-01-01 05:10:02
雷霆交易字母哥理由 削弱火箭和马刺阵容 五首轮签打造三连冠王朝

雷霆交易字母哥理由 削弱火箭和马刺阵容 五首轮签打造三连冠王朝

篮球话题团
2025-12-20 00:35:03
斯诺克最新战报!中国小将破百紧追火箭陪练,12冠王3-1冲赛点!

斯诺克最新战报!中国小将破百紧追火箭陪练,12冠王3-1冲赛点!

刘姚尧的文字城堡
2025-12-20 05:30:51
张嘉倪:36岁被抛弃,失去两个孩子的抚养权,如今男方后悔

张嘉倪:36岁被抛弃,失去两个孩子的抚养权,如今男方后悔

观察鉴娱
2025-12-19 08:42:19
人生所有烦恼,都可以在《金刚经》里找到答案

人生所有烦恼,都可以在《金刚经》里找到答案

十点读书
2025-12-11 19:26:27
特朗普通告全球,俄乌协议即将达成,乌克兰获得80万大军保障

特朗普通告全球,俄乌协议即将达成,乌克兰获得80万大军保障

非凡观点
2025-12-20 10:47:19
“演唱会出轨门”女主首度发声,那次拥抱是第一次身体亲昵接触

“演唱会出轨门”女主首度发声,那次拥抱是第一次身体亲昵接触

韩小娱
2025-12-20 10:24:06
男子去试驾往家里开,副驾还坐着销售小姐姐,男生:白捡一个媳妇

男子去试驾往家里开,副驾还坐着销售小姐姐,男生:白捡一个媳妇

唐小糖说情感
2025-11-10 10:40:56
周末气温大起大落:较强冷空气中午抵沪,明天跌入冬日体感

周末气温大起大落:较强冷空气中午抵沪,明天跌入冬日体感

纵相新闻
2025-12-20 15:55:04
中国向美国索赔3500亿,回击新冠诬蔑,美政府收到传票,愁得不行

中国向美国索赔3500亿,回击新冠诬蔑,美政府收到传票,愁得不行

影孖看世界
2025-12-20 18:23:20
爱德华兹一攻一防,揭开了雷霆的遮羞布,他们比起73胜勇士差多了

爱德华兹一攻一防,揭开了雷霆的遮羞布,他们比起73胜勇士差多了

摸神drose
2025-12-20 22:29:24
女生体毛旺盛的真实感受,网友反应超乎想象!

女生体毛旺盛的真实感受,网友反应超乎想象!

特约前排观众
2025-11-19 00:15:03
一旦开战中国必败?我国著名院士批主战派,要懂得甲午战争的惨败

一旦开战中国必败?我国著名院士批主战派,要懂得甲午战争的惨败

文史旺旺旺
2025-11-14 20:30:09
今年,我国GDP能达到20万亿美元吗?

今年,我国GDP能达到20万亿美元吗?

南生今世说
2025-12-20 17:52:07
又有新飞机!新款中型运输机运-30成功首飞,网友:要搞AC-130那样的炮艇机吗?

又有新飞机!新款中型运输机运-30成功首飞,网友:要搞AC-130那样的炮艇机吗?

军武速递
2025-12-18 19:29:44
印度大坝突然放水 巴基斯坦怒斥:水不是武器!

印度大坝突然放水 巴基斯坦怒斥:水不是武器!

看看新闻Knews
2025-12-20 18:08:03
2025-12-21 03:43:00

头条要闻

台北致4人身亡嫌犯被指是"大陆籍" 蒋万安回应

头条要闻

台北致4人身亡嫌犯被指是"大陆籍" 蒋万安回应

体育要闻

我开了20年大巴,现在是一名西甲主帅

娱乐要闻

2026央视跨年晚会阵容曝光,豪华阵仗

财经要闻

求解“地方财政困难”

科技要闻

许四清:具身智能的"ChatGPT时刻"还未到来

汽车要闻

岚图推进L3量产测试 已完成11万公里实际道路验证

态度原创

教育
旅游
房产
公开课
军事航空

教育要闻

别逼孩子死磕高二数学了!我用3个“懒方法”,让倒数娃冲进前20

旅游要闻

30 年沉淀!盱眙天泉湖藏着冬日限定秘境,红杉雾景美到窒息

房产要闻

广州有态度,一座国际化社区给出的城市答案

公开课

李玫瑾:为什么性格比能力更重要?

军事要闻

泽连斯基:前线局势愈发艰难

无障碍浏览 进入关怀版
×