红外小目标检测方法综述.pdf
《红外小目标检测方法综述.pdf》由会员分享,可在线阅读,更多相关《红外小目标检测方法综述.pdf(8页珍藏版)》请在咨信网上搜索。
1、计算机与现代化JISUANJI YU XIANDAIHUA2023年第8期总第336期收稿日期:2022-09-06;修回日期:2022-09-06作者简介:胡睿杰(2002),男,江西南昌人,本科生,研究方向:数字图像处理,红外目标识别,E-mail:;车逗(2001),男,本科生,研究方向:数字图像处理,红外目标识别,E-mail:。文章编号:1006-2475(2023)08-0079-080引言红外小目标检测是计算机视觉和图像处理领域中的一个重要研究方向,它涉及到从红外图像中精确地识别和定位小尺寸目标的技术。红外小目标通常是指尺寸较小、热辐射弱、与周围环境温度差异不明显的目标,如远距离
2、导弹、无人机、机动车辆等。由于其在战术、安全监控、灾难救援等领域的广泛应用,红外小目标检测技术受到了广泛的关注和研究。与可见光图像不同,红外图像反映的是目标的热辐射信息,比如现代自动驾驶技术的红外成像系统通过热辐射信息在相当长的距离内探测目标。其中面临着一些独特的挑战。首先,红外图像中的小目标通常受到复杂背景、低对比度和噪声等因素的干扰,使得目标难以与背景区分开来。其次,红外图像中的小目标尺寸较小,常常只有几个像素大小,这使得目标的定位和识别更加困难。此外,红外图像中的小目标通常以热点或热斑的形式存在,其形状和纹理信息有限,增加了目标检测的难度。为了解决这些问题,研究者们提出了各种红外小目标检
3、测方法。这些方法包括基于传统图像处理技术的方法,如滤波、阈值处理和形态学运算等,以及基于机器学习和深度学习的方法,如支持向量机、卷积神经网络和循环神经网络等。这些方法在红外小目标检测领域取得了一定的成果,比如红外小目标探测在红外搜索和跟踪系统中的广泛应用,特别是在军事领域,包括红外寻巢制导、预警、防空和反导弹。但仍然存在一些问题,如检测精度不高、实时性较差以及对复杂场景的适应性有限等。本文将重点讨论近年来基于传统的特征提取、局部对比与深度学习的3种红外小目标检测方法,分析其在目标检测性能、鲁棒性和实时性等方面的优势和不足。此外,还将探讨当前研究中存在的一些挑战和未来发展的方向。通过深入了解红外
4、小目标检测领红外小目标检测方法综述胡睿杰,车逗(厦门理工学院光电与通信工程学院,福建 厦门 361024)摘要:本文旨在对基于传统的特征提取、局部对比与现今使用广泛的深度学习的3种红外小目标检测方法进行综述,并通过对比这3种方法的前沿应用,分析其在目标检测性能、鲁棒性和实时性等方面的优势和不足。从中发现,基于特征提取的方法在简单场景下具有较好的实时性和鲁棒性,但在复杂场景下可能受限。基于局部对比方法对目标的尺寸和形状变化相对鲁棒,但对背景干扰较为敏感。基于深度学习的方法在目标检测性能方面表现出色,但需要大量数据和较大的计算资源。因此,在实际应用中,应根据具体场景需求综合考虑这些方法的优缺点,并
5、选择合适的方法进行红外小目标检测。关键词:红外小目标检测;特征提取;局部对比;深度学习中图分类号:TP391文献标志码:ADOI:10.3969/j.issn.1006-2475.2023.08.013Review of Infrared Small Target DetectionHU Rui-jie,CHE Dou(School of Opto-Electronics and Communication Engineering,Xiamen University of Technology,Xiamen 361024,China)Abstract:This article aims to
6、review three infrared small target detection methods based on traditional feature extraction,localcomparison,and widely used deep learning today.Then,by comparing the cutting-edge applications of these three methods,their advantages and disadvantages in target detection performance,robustness,and re
7、al-time performance are analyzed.Wefind that feature extraction based methods exhibit good real-time and robustness in simple scenarios,but may have limitationsunder complex conditions.The method based on local comparison is relatively robust to changes in object size and shape,but sensitive to back
8、ground interference.The method based on deep learning performs well in object detection performance,but requireslarge-scale data and larger computing resources.Therefore,in practical applications,the advantages and disadvantages of thesemethods should be comprehensively considered based on specific
9、scenario requirements,and appropriate methods should be applied to infrared small target detection.Key words:infrared small target detection;feature extraction;local contrast;deep learning计算机与现代化2023年第8期域的最新进展,期望能够为进一步提升红外小目标检测技术的性能并为其应用提供有益的启示。1红外小目标检测的发展与现状红外小目标检测技术已经从传统的手工特征提取算法向机器学习、深度学习等方向发展。随着
10、卷积神经网络(CNN)和循环神经网络(RNN)等算法的发展,基于深度学习的红外小目标检测算法已经取得了较好的效果,在复杂背景下也能检测出较小的目标。红外小目标检测技术在国家安全、军事领域以及民用领域有着广泛的应用,例如在边境监控、防范恐怖袭击、火灾监测、环境监测等方面。以下是红外小目标的时间发展线:1)1940年-1950年,红外小目标技术处于起步阶段。在这个时期,人们开始研究和应用红外技术,但红外小目标检测技术还比较初级。2)1960年-1980年,红外小目标技术属于早期阶段。这个时期,红外技术主要用于军事应用,如导弹追踪和侦察。这些系统大多采用基于冷却红外探测器的设备,可实现高分辨率和高灵
11、敏度。然而,受制于成本高昂和大规模生产困难的限制,这些技术在民用领域中应用相对有限。3)1990年-2000年,红外图像传感器迅速发展。随着红外图像传感器技术的进步,包括非制冷红外探测器(如热电偶和斑点阵列)的发明,使红外小目标检测技术逐渐变得更加普及。这些传感器具有低成本、低功耗和便于集成等优势,使得红外小目标检测技术可以应用于更广泛的领域,包括安防监控、火灾检测和医疗诊断等。4)2000年-至今,随着计算机处理能力的提升和图像处理算法的不断演进,红外小目标检测技术取得了显著的进展。以下是一些常见的算法和方法:基于像素的方法:基于红外图像的像素级处理,包括基于阈值的方法、自适应滤波和形态学操
12、作等。基于局部特征的方法:利用目标的纹理、形状和边缘等局部特征进行检测和分类,例如 Haar 特征1、SIFT2和HOG特征等3。基于机器学习的方法:应用机器学习算法,如支持向量机(SVM)4、随机森林(Random Forest)和深度学习(Deep Learning)5等,从大量的训练样本中学习红外小目标的特征和模式。红外小目标检测技术的性能一直是热点问题之一,需要综合考虑精度、鲁棒性、实时性等方面的指标。一些新的算法结合了多种特征提取方法和机器学习技术,在检测效果和速度上都得到了较好的平衡。2检测算法的分类2.1基于特征提取的算法2.1.1一种面向小型的对象检测多尺度特征融合方法计算机视
13、觉是利用计算机和相关设备模拟生物视觉。近年来,计算机视觉在工业生产、农业、医疗卫生等各个领域引起了广泛的关注。但是,现有的小目标检测方法仍然存在一些局限性,不能充分挖掘潜在信息,如从特征图中获得更准确的位置信息和更强的语义特征。例如,大多数基于上下文信息的目标检测方法只以一种简单的方式连接高级的低级特征。然而,这种粗糙叠加的融合阶段可能会导致噪声信息等冗余信息的增加,从而降低检测性能。在这种情况下,现有的小目标检测方法可能不适用于实际应用中的复杂的小目标检测任务,如用于印刷电路板(PCB)的表面缺陷检测、用于遥感图像的小目标检测和长距离运动目标检测。一般是通过充分利用上下InputBackbo
14、neNeckHandAutoAugmentMiup图1增强特征融合方法ASPP-abalem-FPN(ABFPN)EnhancedResNetCascade RCNNAIIFPNC1C2C3C4C5P2P3P4P5FPNbackboneF2F3F4F5C2P1F111 conv11 conv11 conv11 convOutaddOut1Out2Out3Out4OutSkip-ASPP ModuleBalanced Modulefeature map2-upsample11 and 11 convdilation_rate-24B1Resize&AverageB2SpaceNonlocalB3
15、ResidualBlockS1D-ASPP(D=3)S2D-ASPP(D=6)S3D-ASPP(D=12)S4D-ASPP(D=18)S5D-ASPP(D=24)S5D-ASPP(D-24)802023年第8期文信息和增强特征融合来开发一个先进的小目标检测框架。如图 1所示,即空间金字塔池(ASPP)平衡FPN(ABFPN)用于小目标检测。其中ASPP模块来增强特征融合和扩展接受域,具有不同扩张速率的ASPP被设置为跳跃连接方式6。此外,一个由 3个模块,利用调整大小和平均块、空间非局部块和残差块来更有效地学习语义和详细信息。由平衡模块融合的特征可以获得来自不同分辨率的每个特征图的平衡信息,从
16、而避免了非相邻层中的语义信息因横向连接而减弱。需要强调的是,所提出的ABFPN方法是一种具有竞争力的特征融合方法,他可以嵌入到任何现有的目标检测框架中7。表1 不同PCB缺陷检测方法的比较AlgorithmsImpro YOLOv3Impro fasterRCNNFCOSPP-YoloDeformableDETRTDD-NetSniperIPDD frameworkAP/%43.648.648.747.449.249.351.456.4AP50/%94.893.994.895.196.195.297.998.8AP75/%30.442.543.138.442.443.747.257.8APs/
17、%45.928.641.327.544.732.145.747.6APm/%44.449.149.848.349.050.151.456.6APl/%31.741.435.045.349.236.254.157.2AR/%51.955.055.863.258.956.660.563.3实验结果如表 1,显示了 IPDD 框架和其他 7 种最先进的检测方法的比较结果。其中 Impro YOLOv38、FCOS9、DETR10都是小型目标检测任务中性能优异的检测方法,TDD-Net 是一种专门提出的PCB小缺陷检测方法。在评估指标是相同的情况下IPDD框架在所有性能指标上都取得了最好的结果,证明了
18、 IPDD 框架在 PCB 缺陷检测方面的有效性。特别是,IPDD 框架在 AP、AP50、AP75、APs 的所有评价指标上都优于其他方法。与 Impro YOLOv3相比,指示器 APs 在使用 IPDD 框架时,提高了 1.7个百分点,这表明了IPDD框架在检测小缺陷方面的优越性。2.1.2基于局部特征的密度峰值搜索的红外小目标检测基于局部特征密度特征图的红外小目标检测方法。处理流程如下:1)结合局部四元模式(LTrP)和二阶LTrP来生成密度特征图;2)对特征图应用密度峰搜索,从而获得同时包含真实目标和假目标的候选目标;3)生成2个局部特征,熵和三阶矩,对于每个中心作为候选目标,然后融
19、合它们组成一个新的特征来搜索真实目标。工作中使用的密度特征图是基于多阶LTrPs构建的,这保证了寻找候选目标的高鲁棒性。此外还利用图像斑块的熵和三阶矩组成了一个更有效的特征。利用这一新特征,可以在复杂场景中对真实目标的检测具有较高的精度。该方法的框架如图2所示。其中首先采用LTrP生成特征,利用该特征获得每个像素的密度峰值和图像的密度特征图。然后,计算每个密度峰值的局部密度和距离,将像素转换为密度距离空间。同时,候选目标的位置(在图中用蓝色圆圈表示)是根据密度峰得到的。此外,根据候选位置生成图像补丁,并计算2个局部特征,熵和三阶矩为每个补丁。基于这2个特征的融合,应用阈值分割得到真实目标的位置
20、(用图中红色圆圈表示)和初始检测结果。最后,通过基于区域增长的后处理得到了真实的目标。Final ResultFusionSearchingEntropyThird-Order MomentLocal FeatureDistributionExtractingPatchsPositioningCandidate TargetsPositions MapInput IR lmageLTrPTransformingDensity FeatureMapDensity-DistancesResultInitial DetectionResultSeparateTargets图2所提出的方法的框架图3表
21、明,在密度-距离结果中,真实目标比其他候选目标具有更大的密度峰值和距离。此外,从密度特征图中可以看出,源视频帧的详细结构得到了增强,同时减少了随机杂波和噪声的干扰。利用密度特征图,得到了初始检测到的目标,其中真实目标和其他候选目标分别用红圈和蓝圈表示。同时,最终结果对应的三维图如图3所示,表明使用该法可以正确地检测各种场景的结果。图 3 从左到右代表 6 个场景。第 1 行:源图像。第2行:密度-距离的结果。第3行:密度特征贴图。第4行:初始检测结果。第5行:使用三维地图的最终图36个序列和相应的结果胡睿杰,等:红外小目标检测方法综述81计算机与现代化2023年第8期LSTA1RG2条件RG3
22、条件洗牌条件LSTA1LSTA2LSTA2条件条件条件条件条件CD-RGCD-RGCD-RGCD-RGCD-RGLSTA2LSTA1LSTA1条件条件LSTA2Irt+2Irt+1IrtIrt-2Irt-1IrtFt+20Ft+10F0Ft-10Ft-20Ft-2CD-RGFtCD-RGFt-1CD-RGFt+1CD-RGFt+2CD-RGFt+1LSTA1Ft+2LSTA1Ft+1LSTA2Ft+2LSTA2Ft-1LSTA1Ft-2LSTA1Ft-1LSTA2Ft-2LSTA2Ft-1cg图4MoCoPnet的总体框架结果。实验结果表明,该方法具有较好的检测性能和鲁棒性。不过目前只是设计了
23、一种检测单个目标的方法,在未来,将在此基础上研究如何同时检测多个目标11。2.2基于局部对比的算法2.2.1基于局部运动和对比度先验驱动的深度网络红外成像系统是昼夜全天候的,具有较高的穿透性、灵敏度和隐蔽性。红外成像系统广泛应用于安全监控、遥感调查、航空航天防御等军事任务。由于红外成像系统的特殊成像机制和军事应用对红外小目标超分辨率(SR)提出了以下要求:1)超分辨图像的高保真度。应尽可能避免图像噪声和虚假轮廓;2)超分辨率目标的高对比度。应加强超分辨图像中的目标对比度,以促进后续特征提取;3)对复杂的场景和噪声具有较高的鲁棒性。小物体时常被淹没在背景中,这时与背景的局部对比度较低;4)对数据
24、集不足时的高泛化。在缺乏红外图像数据集时,要求SR算法必须在相对较小的数据集上获得稳定的结果。局部运动和对比先验驱动深度网络(MoCoPnet)的拟议模块(即中心差值残差组和局部时空注意力模块)整合了领域知识(即局部对比度)和红外小目标SR方法。将红外小目标的领域知识(即局部对比度先验和局部运动先验)整合到深度网络中,这可以缓解数据驱动方法的内在特征稀缺性。MoCoPnet的总体框架如图4所示。具体来说,一个有5帧LR的图像序列LRt+i(i=-2,2)首 先 被 发 送 到 卷 积 层,生 成 初 始 特 征Ft+i0(i=-2,2),然后将其发送到中心差异残差组(CD-RG),以实现以中心
25、为导向的梯度感知特征提取。然后,每个邻域特征Ft+iCD-RG(i=-2,-1,1,2)与参考特征F配对并发送到2个局部时空注意(LSTA)模块,以实现运动补偿和增强局部特征。接下来是参考特征FtCD-RG与 2 个补偿邻域帧Ft+kLSTA2,Ft-kLSTA2连接,然后发送到一个残差组(RG)和一个卷积层进行粗融合。接着,将2个融合的特征连接起来并发送到RG和卷积中进行精细融合。融合特征由一个 RG、一个子像素层和一个卷积层处理,以进行 SR 重建。卷积层进行 SR 重建和上采样。最后,为了加快训练的收敛速度,通过添加双三次上采样的 LR 参考帧来获得 SR 参考帧。本文使用 SR 参考帧
- 配套讲稿:
如PPT文件的首页显示word图标,表示该PPT已包含配套word讲稿。双击word图标可打开word文档。
- 特殊限制:
部分文档作品中含有的国旗、国徽等图片,仅作为作品整体效果示例展示,禁止商用。设计者仅对作品中独创性部分享有著作权。
- 关 键 词:
- 红外 目标 检测 方法 综述
1、咨信平台为文档C2C交易模式,即用户上传的文档直接被用户下载,收益归上传人(含作者)所有;本站仅是提供信息存储空间和展示预览,仅对用户上传内容的表现方式做保护处理,对上载内容不做任何修改或编辑。所展示的作品文档包括内容和图片全部来源于网络用户和作者上传投稿,我们不确定上传用户享有完全著作权,根据《信息网络传播权保护条例》,如果侵犯了您的版权、权益或隐私,请联系我们,核实后会尽快下架及时删除,并可随时和客服了解处理情况,尊重保护知识产权我们共同努力。
2、文档的总页数、文档格式和文档大小以系统显示为准(内容中显示的页数不一定正确),网站客服只以系统显示的页数、文件格式、文档大小作为仲裁依据,个别因单元格分列造成显示页码不一将协商解决,平台无法对文档的真实性、完整性、权威性、准确性、专业性及其观点立场做任何保证或承诺,下载前须认真查看,确认无误后再购买,务必慎重购买;若有违法违纪将进行移交司法处理,若涉侵权平台将进行基本处罚并下架。
3、本站所有内容均由用户上传,付费前请自行鉴别,如您付费,意味着您已接受本站规则且自行承担风险,本站不进行额外附加服务,虚拟产品一经售出概不退款(未进行购买下载可退充值款),文档一经付费(服务费)、不意味着购买了该文档的版权,仅供个人/单位学习、研究之用,不得用于商业用途,未经授权,严禁复制、发行、汇编、翻译或者网络传播等,侵权必究。
4、如你看到网页展示的文档有www.zixin.com.cn水印,是因预览和防盗链等技术需要对页面进行转换压缩成图而已,我们并不对上传的文档进行任何编辑或修改,文档下载后都不会有水印标识(原文档上传前个别存留的除外),下载后原文更清晰;试题试卷类文档,如果标题没有明确说明有答案则都视为没有答案,请知晓;PPT和DOC文档可被视为“模板”,允许上传人保留章节、目录结构的情况下删减部份的内容;PDF文档不管是原文档转换或图片扫描而得,本站不作要求视为允许,下载前自行私信或留言给上传者【自信****多点】。
5、本文档所展示的图片、画像、字体、音乐的版权可能需版权方额外授权,请谨慎使用;网站提供的党政主题相关内容(国旗、国徽、党徽--等)目的在于配合国家政策宣传,仅限个人学习分享使用,禁止用于任何广告和商用目的。
6、文档遇到问题,请及时私信或留言给本站上传会员【自信****多点】,需本站解决可联系【 微信客服】、【 QQ客服】,若有其他问题请点击或扫码反馈【 服务填表】;文档侵犯商业秘密、侵犯著作权、侵犯人身权等,请点击“【 版权申诉】”(推荐),意见反馈和侵权处理邮箱:1219186828@qq.com;也可以拔打客服电话:4008-655-100;投诉/维权电话:4009-655-100。