基于U型残差编解码网络的带钢缺陷检测算法.pdf

D O I:1 0.3 9 6 9/j.i s s n.1 0 0 3-0 9 7 2.2 0 2 3.0 3.0 2 3 文章编号:1 0 0 3-0 9 7 2(2 0 2 3)0 3-0 4 8 4-0 6基于U型残差编解码网络的带钢缺陷检测算法郭华平*,毛海涛,詹尚桂,孙艳歌,李 萌,张 莉(信阳师范大学 计算机与信息技术学院,河南 信阳 4 6 4 0 0 0)摘 要:工业生产中带钢表面缺陷具有缺陷类型多变、背景杂乱和对比度低等特点,现有的缺陷检测方法无法检测出完整的缺陷对象。针对上述问题,提出一种基于U型残差编解码网络的带钢缺陷检测算法。在编码阶段,算法利用全卷积神经网络提取丰富的多尺度缺陷特征,并结合注意力机制加速模型收敛。在解码阶段,使用所提出的U型残差解码网络恢复编码阶段编码的显著性信息。此外,设计了一个残差细化网络,用以进一步优化粗糙的显著图。实验结果表明,所提出的算法具有较强的鲁棒性。关键词:编解码;缺陷检测;显著目标检测;残差细化结构中图分类号:X 5 1 3 文献标识码:A开放科学(资源服务)标识码(O S I D):S t r i p S t e e l D e f e c t D e t e c t i o n A l g o r i t h m B a s e d o n U-s h a p e d R e s i d u a l C o d e c N e t w o r kG U O H u a p i n g*,MA O H a i t a o,Z H A N S h a n g g u i,S U N Y a n g e,L I M e n g,Z H A N G L i(C o l l e g e o f C o m p u t e r&I n f o r m a t i o n T e c h n o l o g y,X i n y a n g N o r m a l U n i v e r s i t y,X i n y a n g 4 6 4 0 0 0,C h i n a)A b s t r a c t:T h e s u r f a c e d e f e c t s o f s t r i p s t e e l i n i n d u s t r i a l p r o d u c t i o n h a v e t h e c h a r a c t e r i s t i c s o f c h a n g e a b l e d e f e c t t y p e s,c l u t t e r e d b a c k g r o u n d a n d l o w c o n t r a s t.T h e e x i s t i n g d e f e c t d e t e c t i o n m e t h o d s c a n n o t d e t e c t t h e c o m p l e t e d e f e c t o b j e c t s.I n o r d e r t o s o l v e t h e a b o v e p r o b l e m s,a s t r i p d e f e c t d e t e c t i o n a l g o r i t h m b a s e d o n U-s h a p e d r e s i d u a l e n c o d e r-d e c o d e r n e t w o r k i s p r o p o s e d.I n t h e e n c o d i n g s t a g e,t h e a l g o r i t h m u s e s a f u l l y c o n v o l u t i o n a l n e u r a l n e t w o r k t o e x t r a c t r i c h m u l t i-s c a l e d e f e c t f e a t u r e s,a n d c o m b i n e s a n a t t e n t i o n m e c h a n i s m t o a c c e l e r a t e m o d e l c o n v e r g e n c e.I n t h e d e c o d i n g s t a g e,t h e s a l i e n c y i n f o r m a t i o n e n c o d e d i n t h e e n c o d i n g s t a g e i s r e c o v e r e d u s i n g t h e p r o p o s e d U-s h a p e d r e s i d u a l d e c o d i n g n e t w o r k.F u r t h e r m o r e,a r e s i d u a l r e f i n e m e n t n e t w o r k i s d e s i g n e d t o f u r t h e r o p t i m i z e t h e c o a r s e s a l i e n c y m a p.T h e e x p e r i m e n t a l r e s u l t s s h o w t h a t t h e p r o p o s e d a l g o r i t h m h a s s t r o n g r o b u s t n e s s.K e y w o r d s:c o d e c n e t w o r k;d e f e c t d e t e c t i o n;s a l i e n t o b j e c t d e t e c t i o n;r e s i d u a l s r e f i n e t h e s t r u c t u r e0 引言带钢是工业生产中一种不可或缺的原材料,在航空航天、船舶、汽车等制造领域有着广泛的应用。然而,在制造过程中受制造工艺和生产环境等复杂因素的影响,带钢表面可能会出现各种类型的缺陷,如划痕、裂纹、斑块等。这些缺陷不仅会对产品的外观造成影响,还会影响其使用寿命。因此,带钢表面缺陷检测是现代工业生产中极其重要的一步。由于传统的人工检测方式受视觉疲劳、注意力分散等因素的影响,很难达到现代工业生产中高效性和实时性的要求,所以建立带钢表面缺陷自动检测系统对带钢质量控制具有极其重要的意义。人类视觉系统具有有效的注意力机制,受人类视觉注意机制的启发,显著性目标检测技术被用来快速检测缺陷对象。显著性目标检测可以快速捕捉图像中最重要视觉信息,并过滤大量背景干扰,所以其作为一种快速的预处理操作被广泛应用于各种计算机视觉任务,如图像分割1、缺陷分类2、缺陷检测3、目标跟踪4等。目前,根据特征提取策略的不同,显著性目标检测方法主要分为基于传统模型的方法和基于深度学习的方法。前者先是手工制作视觉特征,然后根据先验知识和假设开发各种模型,例如稀疏编码、收稿日期:2 0 2 2-0 5-0 3;修回日期:2 0 2 2-1 1-0 1;*.通信联系人,E-m a i l:h p g u o x y n u.e d u.c n 基金项目:国家自然科学基金项目(6 2 0 6 2 0 0 4,3 1 9 0 0 7 1 0);河南省自然科学基金青年项目(2 2 2 3 0 0 4 2 0 2 7 4,2 2 2 3 0 0 4 2 0 2 7 5);河南省高等学校重点科研项目应用研究计划(2 2 A 5 2 0 0 0 8);信阳师范学院研究生科研创新基金(2 0 2 1 KY J J 1 0)作者简介:郭华平(1 9 8 2),男,河南信阳人,副教授,博士,硕士生导师,主要从事机器学习与数据挖掘等方向的研究。484信阳师范学院学报(自然科学版)J o u r n a l o f X i n y a n g N o r m a l U n i v e r s i t y第3 6卷 第3期 2 0 2 3年7月 N a t u r a l S c i e n c e E d i t i o n V o l.3 6 N o.3 J u l.2 0 2 3流形排序等。如B O L UK I等5提出了一种基于最优G a b o r滤波的纺织面料实时检测自动算法。由于该算法对噪声很敏感,只能适用于特定的情况。为了解决上述问题,基于深度学习的显著性检测方法被提了出来。在真实值的监督下,深度学习方法可以自动学习丰富的图像表示,显著提高了缺陷检测的性能。尽管基于深度学习的显著性检测方法已取得了瞩目的结果,但它们在目标完整性和边界保留方面仍有一些不足。具体而言,现有基于深度学习的缺陷检测方法在分割缺陷对象方面仍具有以下缺点:1)在检测具有小目标的图像时,很难从紧凑的背景中分割出完整的缺陷对象;2)在处理杂乱背景或低对比度时,往往会引入背景噪声,无法清晰地检测出整个缺陷区域。针对以上问题,本文提出了U型残差编解码网 络(U-R e s i d u a l E n c o d-D e c o d e r N e t w o r k,UD R N e t),具体如下:(1)提出一种基于编解码残差网络的显著性检测方法,该方法具有较小的模型规模且具有较高的检测精度和鲁棒性;(2)在 编 码 器 阶 段,利 用 全 卷 积 神 经 网 络(F u l l y C o n v o l u t i o n a l N e t w o r k,F C N)6的 优势,提取丰富的多尺度特征;同时,引入轻量级注意力机制,使模型更加关注重要的缺陷区域;(3)在解码器阶段,使用所提出的U型残差解码块(U-s h a p e d R e s i d u a l D e c o d i n g B l o c k,UR B),以恢复在F C N的多个层中编码的显著性信息;同时,解码网络后添加了一个细化网络,以优化显著图中缺陷对象的边界细节。为了使模型更好地定位缺陷区域,本文采用深度监督机制,6个监督信号分别被施加到解码器网络中的5个U型解码块和细化网络上,用于监督U型解码块和细化网络的预测。1 提出方法先详细介绍UD R N e t的3个子模块,然后进一步阐述融合损失对网络输出完整结构和详细边界的重要性。1.1 编码器网络采用编码器-解码器结构的显著性检测方法,这种网络结构可以有效地融合低层丰富的纹理信息和高层详细的上下文语义信息,有助于精准预测缺陷对象的位置。与以往的编解码网络不同,本文使用R e s N e t-3 4作为特征提取的主干,采用残差网络作为主干,一方面,其不是简单地堆叠在一起,而是使用跳越连接;另一方面,残差网络实现较深层次的网络时,受梯度消失影响小,并且具有较低复杂性。编码器部分具有1个输入卷积层和4个残差块(c o n v 2-3、c o n v 3-4、c o n v 4-6和c o n v 5-3)。输入卷积层和4个残差块都来自R e s N e t-3 4,不同之处在于,本文所提出模型输入层通道数为6 4,卷积核大小为33、步长为1,而不是77、步长为2的卷积核。为了进一步扩大感受野的大小,本文在输入层之后添加了一个步长为2的最大池化操作。最后,每个卷积的输出被送到B N层,随后使用R e L U激活函数来增强非线性表示能力。近年来,注意力机制因其可移植性和高效性而被广泛 用 于 各 种 计 算 机 视 觉 任 务 中。因 此,在R e s N e t-3 47的每个残差基本块中嵌入了一个轻量级的卷积注意力机制模块,表示为RM-i(i=1,2,3,4)。RM的详细结构如图1所示。图1 RM的详细网络结构图F i g.1 D e t a i l e d n e t w o r k s t r u c t u r e d i a g r a m o f RM为了进一步捕捉全局信息,在编码器跟解码器之间添加一个空洞卷积模块,它是由3个5 1 2通道(扩张率为2)且卷积核大小为33的卷积层组成。为了与原始R e s N e t-3 4保持相同的分辨率,第一个卷积层以2的步幅进行下采样。然后,这些卷积层中的每一层之后是B N和R e L U激活函数。1.2 UR B解码网络在显著目标检测与其他分割任务中,局部和全局信息都非常重要。但现有的大部分卷积神经网络,为了节省空间和提高计算效率,通常使用尺寸为11或 者33的 卷 积 核 进 行 特 征 提 取 如VG G8、D e n s e N e t9等。受尺寸限制,卷积核感受野较小,浅层的输出特征仅包含局部特征。为了获得更多的全局信息,最直接的方法是扩大感受野。传统的卷积神经网络是对图像先做卷积再进行池化操作,降低图像尺寸的同时增大感受野。但是由于图像分割预测的输出是逐像素的,所以只有将池化后的图像上采样到原始的图像尺寸再进行预测,584郭华平,毛海涛,詹尚桂,等.基于U型残差编解码网络的带钢缺陷检测算法才能使得每个像素都能看到较大感受野信息。因此使用F C N图像分割中有两个关键点:一个是池化操作减小图像尺寸的同时增大感受野;另一个是上采样扩大图像尺寸。然而在尺寸变化的过程中,会造成一些空间信息的丢失。空洞卷积的提出解决了上述问题。空洞卷积的引入能扩大感受野和捕获多尺度上下文信息。另外空洞卷积还可以通过调整扩张率,从而获得不同的感受野。综上所述,为了捕获多尺度特征,提出了一个U型的残差解码网络UR B。UR B-L(Ci n,M,Co u t)的结构如图2所示,其中L是解码器中的层数,Ci n、Co u t表示输入和输出信道,M表示UR B内部层中的信道数。图2 U R B的整体结构F i g.2 O v e r a l l s t r u c t u r e o f U R BUR B主要由3部分组成:(1)先是一个输入卷积层,把输入Ci n通道的图像x转换为Co u t通道的中间映射F1(x),这层是用来提取局部特征。(2)高度为L的U型对称编解码结构,以中间特征映射F1(x)为输入,学习提取和编码多尺度上下文信息U(F1(x)。L越大,意味着UR B就需要更多的池化、更大的感受野和更丰富的局部和全局特征。通过调整此参数,可以从任意空间分辨率的输入特征映射中提取多尺度特征。该方法先从下采样的特征映射中提取多尺度特征,然后通过逐步上采样、连接和卷积将其编码成高分辨率特征映射。这个过程减轻了大尺度直接上采样造成的细节损失。(3)受R e s N e t的启发,一个跳越连接通过相加的方式融合局部特征和多尺度特征F1(x)+U(F1(x)。残差块中的运算可以总结为H(x)=F1(x)+U(F1(x),式中:H(x)表示输入特征x的期望映射,F1代表权重层。UR B与残差块的主要区别在于UR B将平面的卷积替换为U型结构,并用权重层转换的局部特征替换原特征。这种结构设计使得网络能够直接从每个残差块中提取多个尺度的特征。更重要的是,因为大多数操作都应用在下采样特征映射上,所以U结构的计算开销很小。1.3 细化网络在训练过程中,采用深度监督机制,以利于有用信息向缺陷对象区域传播。但输出显著图仍有部分细节丢失,因此本文提出了一个具有1 D滤波器的残差细化结构(R R S_1 D),如图3所示该结构遵循编码器-解码器风格。图3 U D R N e t网络结构图F i g.3 N e t w o r k s t r u c t u r e d i a g r a m o f U D R N e t细化模块的编码器和解码器都由4个级组成,每级由两个卷积层组成,后面是一个最大池化或双线性上采样单元。而桥接部分是具有6 4通道且卷积核大小为33的卷积层,随后是B N和R e L U激活函数。为了实现更深的网络层数,使用最大池化操作进行下采样。用于上采样的双线性插值的引入,是为了更好地匹配特征尺寸。另外,为了避免占据大部分计算复杂度的卷积,采用了两个专门的1 D滤波器(即31和13卷积),有效地平衡了细化性能和计算效率。最后将S i g m o i d映射后的细化图作为UD R N e t的最终显著图。1.4 损失函数由于显著对象检测本质上也可以看作是一个密集二分类问题,因此它的输出是每个像素成为前景对象的概率分数,所以大多数以前的方法总是使用交叉熵作为训练损失。然而,这种简单的策略使网络很难捕捉显著对象的全局信息,从而产生了模684第3 6卷 第3期信阳师范学院学报(自然科学版)h t t p:/j o u r n a l.x y n u.e d u.c n2 0 2 3年7月糊的边界或不完整的检测结果。为了在边界定位和结构捕捉方面学习更详细的信息,在Q I N等1 0工作的影响下,构造了一个融合损失来监督网络的训练过程。融合损失分别由B C E(B i n a r y C r o s s E n t r o p y)、I OU(I n t e r s e c t i o n O v e r U n i o n)和S S I M(S t r u c t u r a l S i m i l a r i t y I n d e x)3种损失组成。因此UD R N e t的总损失被定义为:La l l=1Kk=1kL(k)b c e+L(k)i o u+L(k)s s i m ,(1)式中:指的是批量,K是显著图的总数(设置为7),k表示第k侧输出融合损耗的权重(根据经验将其设为1),L(k)b c e、L(k)i o u、L(k)s s i m分别表示B C E、I OU和S S I M损失。2 实验2.1 实验配置为了验证所提出的模型的有效性,在一个具有挑战性的公共带钢基准数据集S D-s a l i e n c y-9 01 1上进行了各种实验。该数据集总共包含9 0 0幅带有3种缺陷类型(夹杂物、斑块和划痕)的裁剪图像,每幅图像的分辨率为2 0 02 0 0像素。除此之外,S D-s a l i e n c y-9 0 0也有S ONG等1 1贡献的像素级注释。2.2 评价指标使用几个普遍认可的评价指标,评估了各种显著目 标 检 测 方 法,包 括MA E(m e a n a b s o l u t e e r r o r)、WF(w e i g h t e d F-m e a s u r e)、S M(s t r u c t u r e-m e a s u r e)等。MA E被用来测量预测的显著性图与真实值之间的差异,定义为MA E=1NNi=1|yg t-yp r e d|,(2)式中:N为测试图像的个数,yg t为真实图像,yp r e d为预测图像。WF是F-m e a s u r e的加权版本,用于克服插值缺陷、依赖性缺陷和同等重要性缺陷可能导致的不公平比较。定义为:WF=(1+2)P r e c i s o nwR e c a l lw2P r e c i s o nw+R e c a l lw,(3)式中:P r e c i s o n为准确率,R e c a l l为召回率,w为权重系数,为平衡系数(设置为1)。S M用于评估预测的非二值显著性图和真值的结构相似性,定义为:S M=so+(1-)sr,(4)式中:so为对象感知相似性,sr为区域感知相似性,为平衡因子(通常设置为0.5)。P F OM用于评估图像分割的边界质量,定义为:P FOM=1m a x(Ne,Nd)Ndk=111+d2k,(5)式中:Ne和Nd分别是理想边缘点和真实边缘点的数量,dk是第k个理想边缘点与检测的边缘点之间的像素误差距离,是缩放系数(实验中设置=1/9)。2.3 参数设置使用NV I D I A T I T AN X p 图形处理器加速实现了基于P y t o r c h框架的模型。为了训练并比较其他深度模型,构建了一个标准的包含8 1 0个图像的训练集。该训练集随机从S D-s a l i e n c y 9 0 0数据集中选择的5 4 0幅原图像(每种缺陷类型1 8 0幅图像)和受噪声(=2 0%)干扰的2 7 0幅图像(每种缺陷类型9 0幅图像)组成。这些噪声图像的原图像是从之前的5 4 0幅图像中随机采集的,有助于增强网络的鲁棒性。在训练过程中,首先将每个图像I的大小调整为2 5 62 5 6,并随机裁剪为2 2 42 2 4,然后通过(1-)/进行归一化。均值和标准差分别设为0.4 6 6 9和0.2 4 3 7。此外,不使用任何验证集,而是训练模型直到训练损失收敛。训练时,采用初始化策略来初始化特征,网络的参数不是使用预先训练好的R e s N e t-3 4模型,而是通过初始化提取。其他层的参数通过使用P y t o r c h的默认设置来初始化。整个网络以端到端的方式进行训练。利用RM S p r o p优化器来训练所提出的网络,其超参数设置如下:学习率为(1 e-3),而其他参数固定为默认值。训练过程大约需要7 h,在大约5 0 K次迭代后收敛,批量为8。测试时,将每幅图像简单地调整到2 5 62 5 6,并反馈到网络以获得其显著图。2.4 消融实验为了验证所提出的UD R N e t模型中使用的每个关键组件的有效性,进行了消融实验。该消融研究包括结构分析和损失分析。所有的实验都是在S D-s a l i e n c y-9 0 0数据集上进行的。(1)结构分析为了证明所提出网络模型中关键组件的有效性,使用MA E、WF和S M指标对模型进行了相关结构的定量评估。如表1所示,每次增加一个关键组件,模型的性能也会相应提高,所以包含组件784郭华平,毛海涛,詹尚桂,等.基于U型残差编解码网络的带钢缺陷检测算法C B AM、UR B和R R S_1 D的模型实现了最佳性能。其中“*”表示去除相关子模块,例如U D R N e t-U R B*表示不包含子模块UR B的UD R N e t模型。与基准模型相比,UD R N e t在MA E上实现了2 6%的大幅降低,在WF和S M指标上分别贡献了3.0%和1.4%的收益。客观地证明了所提出的模型中的所有关键组件对于获得最佳的缺陷对象检测结果都是有用和必要的。表1 结构分析T a b.1 S t r u c t u r a l A n a l y s i s结构MA EWFS MB a s e l i n e(B)0.0 1 6 20.9 0 5 90.9 2 4 4B+C B AM0.0 1 5 30.9 0 4 80.9 2 5 8B+UR B0.0 1 4 00.9 1 4 60.9 3 1 0B+UR B+R R S_1 D0.0 1 3 90.9 2 2 30.9 3 7 7U D R N e t-C B AM*0.0 1 4 50.9 1 3 40.9 3 2 6UD R N e t-UR B*0.0 1 4 30.9 1 5 40.9 3 2 1U D R N e t-R R S_1*0.0 1 4 60.9 1 3 90.9 3 2 0U D R N e t0.0 1 2 00.9 3 5 00.9 3 7 8 (2)损失分析为了验 证 所 构 建 的 融 合 损 耗 的 合 理 性,对UD R N e t结构进行了一组不同损失的实验。如表2最后一行所示,配备融合损失La l l的UD R N e t实现了优越的性能。与采用广泛使用的交叉熵损失Lb c e的 对 应 方 法 相 比,WF和S M分 别 增 长 了2.5 0%和0.5 6%,而MA E则下降了1 4.0 0%。结果发现,使用La l l可以很好地保留缺陷对象的边界,并有效地抑制背景噪声的干扰。因此,这些结果说明融合损失能让本文提出的模型在边界定位中学习更详细和准确的信息。表2 损失分析T a b.2 L o s s a n a l y s i s损失MA EWFS MLb c e0.0 1 4 10.9 1 2 00.9 3 2 5Li o u0.0 1 4 50.9 1 1 00.9 2 5 1Ls s i m0.0 1 5 10.9 0 0 10.9 2 3 1Lb c e+Li o u0.0 1 4 20.9 1 6 00.9 3 2 4Lb c e+Ls s i m0.0 1 4 40.9 0 8 20.9 2 8 5Lb c e+Li o u+Ls s i m(La l l)0.0 1 2 00.9 3 5 00.9 3 7 82.5 结果对比将提出的UD R N e t模型与基于传统模型或深度学习的8种最新的显著性检测方法进行了比较,包括R C R R1 2、2 L S G1 3、B C、S MD、P o o l N e t1 4、P i C AN e t1 5、C P D1 6和B A S N e t1 0,如表3。为了公平比较,使用默认参数运行作者发布的源代码或可执行文件。值得注意的是,所有比较的深度学习模型都在所提出的标准训练集上重新训练。表3 运行速率比较T a b.3 R u n n i n g r a t e c o m p a r i s o n方法T i m e/sC o d eS i z e/m bP C R R1.0 9 5M a t l a b-2 L S G0.6 3 9M a t l a b-B C0.0 5 4M+C-S MD0.3 1 9M+C-P o o l N e t0.0 3 0P y t o r c h2 6 0P i C AN e t0.1 1 6P y t o r c h1 8 0C P D0.0 5 5P y t o r c h1 8 3B A S N e t0.0 5 1P y t o r c h3 3 2本文0.0 3 5P y t o r c h2 6 0 为了定量评估分割缺陷对象的质量,设置=1 0%,表4中展示了所提出模型相对于8种最先进方法的性能。从表4可以看出,与现有的C P D1 6方法相比,在WF、S M和P F OM度量上分别实现了1 2.6%、8.6%和3.1%的 提 升。此 外,与B A S N e t方法相比,所提出的模型在MA E上也实现了1 4.5%的 大 幅 降 低。而 对 于 边 界 质 量,UD R N e t在P F OM度量方面比B A S N e t方法提高了1.9%。事实证明,所提出的模型性能更好。表4 与8种最新模型的性能比较T a b.4 P e r f o r m a n c e c o m p a r i s o n w i t h e i g h t s t a t e-o f-t h e-a r t m o d e l s模型方法MA EWFS MP F OMP C R R0.2 5 5 20.2 5 5 70.5 3 0 20.3 1 3 82 L S G0.2 5 8 70.3 0 0 70.5 3 6 80.3 5 3 0B C0.1 5 1 90.3 7 3 30.5 8 8 10.3 3 5 2S MD0.1 9 9 40.3 6 1 30.5 8 4 00.3 7 4 8P o o l N e t0.0 3 4 50.7 2 6 30.8 2 1 30.7 0 6 0P i C AN e t 0.0 3 5 10.7 5 2 10.8 4 9 00.7 5 4 7C P D0.0 3 5 30.7 2 3 50.8 3 0 80.7 3 4 3B A S N e t0.0 1 6 00.9 0 3 30.9 2 3 50.8 8 8 0本文0.0 1 3 90.9 1 2 70.9 2 9 90.9 0 5 12.6 运行效率在NV I D I A T I T AN X p的G P U上对比了8种显著性检测方法在S D-s a l i e n c y-9 0 0数据集上平均运行时间和模型大小。对于一幅2 0 02 0 0的测试图像,本文方法在不进行任何其他的后处理情况下,只需要0.0 3 5 s就可以产生最终的显著图,除了P o o l N e t,比其他大多数竞争方法都快得多。虽然B A S N e t和本文的模型一样都获得了出色的检测结果,但B A S N e t的模型规模最大。相比之下,所提出的UD R N e t尺寸还不到它的1/2。上述结果884第3 6卷 第3期信阳师范学院学报(自然科学版)h t t p:/j o u r n a l.x y n u.e d u.c n2 0 2 3年7月表明,UD R N e t能够更好地满足当前工业缺陷检测的要求,但仍有不足,对于未来的工作仍有进一步提高其效率的空间。3 结论提出了一种新的端到端的编解码残差网络UD R N e t来有效地检测带钢表面缺陷。通过结合深度监督和融合损失的方式,使模型能够捕捉更精细的细节,并且更容易优化。大量的实验表明,该模型在生成边界清晰的缺陷对象的同时,能有效地滤除背景噪声,最终生成几乎接近真实值的显著图。与其他8种最新的方法相比,UD R N e t模型在4个评价指标上取得了最好的性能,并且具有很强的鲁棒性。此外,UD R N e t不需要任何后处理,并且在单个G P U上以实时速度运行。参考文献:1 K I M N,K I M D,KWAK S,e t a l.R e S T R:C o n v o l u t i o n-f r e e r e f e r r i n g i m a g e s e g m e n t a t i o n u s i n g t r a n s f o r m e r sC/2 0 2 2 I E E E/C V F C o n f e r e n c e o n C o m p u t e r V i s i o n a n d P a t t e r n R e c o g n i t i o n(C V P R),N e w O r l e a n s,L A,U S A:I E E E,2 0 2 2:1 8 1 2 4-1 8 1 3 3.2 AN K a n g,Z HAN G Y a n p i n g.L P V i T:A t r a n s f o r m e r b a s e d m o d e l f o r P C B i m a g e c l a s s i f i c a t i o n a n d d e f e c t d e t e c t i o nJ.I E E E A c c e s s,2 0 2 2,1 0:4 2 5 4 2-4 2 5 5 3.3 L I C h u n l i a n g,S OHN K,YOON J,e t a l.C u t P a s t e:S e l f-s u p e r v i s e d l e a r n i n g f o r a n o m a l y d e t e c t i o n a n d l o c a l i z a t i o nC/2 0 2 1 I E E E/C V F C o n f e r e n c e o n C o m p u t e r V i s i o n a n d P a t t e r n R e c o g n i t i o n(C V P R),N a s h v i l l e,T N,U S A:I E E E,2 0 2 1:9 6 5 9-9 6 6 9.4 K I M M,S E N T I S L.A c t i v e o b j e c t t r a c k i n g u s i n g c o n t e x t e s t i m a t i o n:H a n d l i n g o c c l u s i o n s a n d d e t e c t i n g m i s s i n g t a r g e t sJ.A p p l i e d I n t e l l i g e n c e,2 0 2 2,5 2(1 2):1 4 0 4 1-1 4 0 5 2.5 B O L UK I M,MOHANNA F.I n s p e c t i o n o f t e x t i l e f a b r i c s b a s e d o n t h e o p t i m a l G a b o r f i l t e rJ.S i g n a l,I m a g e a n d V i d e o P r o c e s s i n g,2 0 2 1,1 5(7):1 6 1 7-1 6 2 5.6 L I U Y a n a n,L U Y a o.O n-s e n s o r b i n a r i z e d f u l l y c o n v o l u t i o n a l n e u r a l n e t w o r k f o r l o c a l i s a t i o n a n d c o a r s e s e g m e n t a t i o nC/2 0 2 2 I E E E/C V F C o n f e r e n c e o n C o m p u t e r V i s i o n a n d P a t t e r n R e c o g n i t i o n W o r k s h o p s(C V P RW),N e w O r l e a n s,L A,U S A:I E E E,2 0 2 2:3 6 2 8-3 6 3 7.7 R AMAN S,MA S K E L I NA S R,D AMA E V IC I U S R.M a r k e r l e s s d o g p o s e r e c o g n i t i o n i n t h e w i l d u s i n g R e s N e t d e e p l e a r n i n g m o d e lJ.C o m p u t e r s,2 0 2 1,1 1(1):2.8 D E B NA TH S,R OY R,CHANG D E R S.P h o t o c l a s s i f i c a t i o n b a s e d o n t h e p r e s e n c e o f d i a g o n a l l i n e u s i n g p r e-t r a i n e d D C NN VG G 1 6J.M u l t i m e d i a T o o l s a n d A p p l i c a t i o n s,2 0 2 2,8 1(1 6):2 2 5 2 7-2 2 5 4 8.9 A L F A Z N,HA S NA T A,KHAN A M R N,e t a l.B r i d g e c r a c k d e t e c t i o n u s i n g d e n s e c o n v o l u t i o n a l n e t w o r k(D e n s e N e t)C/P r o c e e d i n g s o f t h e 2 n d I n t e r n a t i o n a l C o n f e r e n c e o n C o m p u t i n g A d v a n c e m e n t s,D h a k a,B a n g l a d e s h:A s s o c i a t i o n f o r C o m p u t i n g M a c h i n e r y,2 0 2 2:5 0 9-5 1 5.1 0