局部图像特征直线描述算法综述_付苗苗.pdf
《局部图像特征直线描述算法综述_付苗苗.pdf》由会员分享,可在线阅读,更多相关《局部图像特征直线描述算法综述_付苗苗.pdf(3页珍藏版)》请在咨信网上搜索。
1、数字媒体技术本栏目责任编辑:唐一东Computer Knowledge and Technology电脑知识与技术第19卷第6期(2023年2月)第19卷第6期(2023年2月)E-mail:http:/Tel:+86-551-65690963 65690964ISSN 1009-3044Computer Knowledge and Technology电脑知识与技术Vol.19,No.6,February2023局部图像特征直线描述算法综述付苗苗(洛阳师范学院 信息技术学院,河南 洛阳 471000)摘要:局部图像特征直线的描述现如今不仅是图像特征直线匹配过程的关键和基础,还已成为人工智能和
2、计算机视觉领域中的研究难点和热点问题之一。它不仅被广泛应用到宽基线匹配、图像检索、图像拼接、3D重建等计算机视觉任务中,还被应用到产品质量检测、指纹解锁、自动工件检测等实际工程应用中。近年来,随着人工智能的发展和深度学习在许多领域的成功应用,文献中出现了诸多相关学者针对局部图像特征直线描述问题而提出的不同算法。本文对经典且具有代表性的局部图像特征直线描述算法进行阐述、分析总结以及全面客观评价,最后总结归纳了局部图像特征直线描述的现状、所面临的困难与挑战以及未来可能的研究走向,为相关学者未来的研究工作提供一定的参考。关键词:局部图像特征直线描述;深度学习;图像特征直线匹配中图分类号:TP18文献
3、标识码:A文章编号:1009-3044(2023)06-0103-03开放科学(资源服务)标识码(OSID):0 引言局部图像特征直线描述是将经过预处理之后的待匹配图像中提取的边缘线特征描述成具有代表性和唯一性的描述向量。一个鲁棒的描述向量应该对于匹配块不会因为视角、光照、旋转、模糊和噪声等的变化而变化,同时对于非匹配块要保持不同图像块之间的区分性。其可以被广泛应用于图像分类、场景识别、人造场景、3D重建、图像配准、图像拼接和图像分割等各个场景中。局部图像特征直线的描述算法不仅是特征匹配领域中一个重要且具有研究意义的子课题,也是计算机视觉任务中的研究难题和研究热点问题之一。其一般分为两个步骤,
4、如图1所示,步骤1:对采集的原图像和经过各种变换的图像进行预处理并提取图像中的特征直线;步骤2:将步骤一获得的特征直线进行描述以生成特征直线描述子。采集的原图像和经过各种变换的图像图像预处理直线特征提取构建直线描述子特征提取特征描述图1 特征直线描述流程图相对于点,直线在一些特定场景中可以提供更多的纹理内容和几何信息,从而为了实现图像的精确匹配。与特征点描述相比,特征直线描述子一直发展缓慢。其主要理由:1)图像的各种几何光学变化会造成图像遮挡问题,导致边缘直线的长度、方向以及纹理发生变化;2)利用边缘检测算子进行提取特征直线时,容易造成直线断裂,进而会使直线出现端点定位不准以及不连续的问题。直
5、线端点的不精确定位将会导致匹配的两条直线的描述向量存在较大的差异,进而会容易造成错误的匹配结果,直接影响匹配性能;3)相对于点,因直线长短不一,在构造特征直线描述向量时会更难以统一表达;4)缺少用于训练的大规模且多样的标注特征直线数据集,然而构造这样的数据集又需要大量的人力和财力。因此,局部图像特征直线描述算法的研究不仅在理论和应用上具有研究价值,同时也具有一定难度和挑战。近年来,深度学习在诸多视觉任务中成功地展现出了其具有强大的函数拟合能力。而局部图像特征直线描述算法的本质任务也是设计一个复杂的函数映射,使得相同物理线的局部图像输出距离相近的特征向量,同时保证不同物理线的局部图像输出距离较大
6、的特征向量。因此,将其应用到局部图像特征直线描述算法中,以提升现有算法的性能不仅值得研究,也是局部图像特征直线匹配任务中研究的热点和难点问题。本文将当今比较经典且主流的由传统经验或研究人员的专业知识驱动的基于手工设计的局部图像特征直线描述算法和由数据驱动基于深度学习的局部图像特征直线描述算法分别进行了全面客观的比较与分析,总结了局部图像特征直线描述的现状、所面临的困难与挑战以及未来可能的发展走向,为未来该领域研究者进一步研究提供一定的参考。1 基于手工设计的局部图像特征直线描述算法局部图像特征直线描述不仅在图像特征匹配算收稿日期:2022-11-15作者简介:付苗苗(1993),女,河南西华人
7、,助教,硕士,研究方向为深度学习、深度迁移学习、图像局部特征描述与匹配。103DOI:10.14004/ki.ckt.2023.0297本栏目责任编辑:唐一东数字媒体技术Computer Knowledge and Technology电脑知识与技术第19卷第6期(2023年2月)第19卷第6期(2023年2月)法中占领着至关重要的位置,还引起了许多该领域研究人员的关注。与特征点描述算法一样,也是从基于手工设计的算法开始的。基于手工设计的局部图像特征直线描述算法的基本思想大都来自于传统经验或研究者的专业知识。其大概分为两类:基于纹理特征直线描述算法和基于几何特征的直线描述算法。基于纹理特征直线
8、描述算法为了获取具有区分性的描述向量,将邻域进行划分作为特征直线的支撑区域。该类算法中最具有代表性的是Wang等人为了解决直线难以统一描述而提出的直线描述子MSLD1(如图2所示)。该算法首先将像素支撑区域中各个子区域的四个方向上的梯度向量描述成一个梯度描述矩阵,最后通过计算该矩阵列向量的均值和标准差来构造MSLD,从而提高了直线描述子的区分性和鲁棒性。该算法对于纹理场景中适当的图像变化具有良好的匹配结果,但在低纹理图像中的匹配结果不佳。此外,它还表明均值和标准差可以有效地描述直线,同时因将其应用到曲线特征描述上而获得了MSCD描述子。李等人2以图像的灰度值为基础,计算直线支撑区域内灰度值编码
9、实现直线的匹配,但是该算法原理复杂,匹配性能低。Lpez等人3提出的一种基于纹理和外观的描述子LMCA,实验结果表明,LMCA在低纹理场景和各种图像变换下仍能具有良好的鲁棒性。但是该算法太过于依赖直线的外观信息,所以其仍需面临直线端点不能准确检测的问题。Ldd.11G12G13G1GiG1 iG2iG3iG1NG2NG3NGNG.图2 直线特征描述子MSLD基于几何特征的直线描述算法其实是依据特征直线的几何属性来实现的。该类算法中最具有代表性的是 Zhang 等人4结合直线描述子 LBD 和几何约束,以实现线的匹配。该算法具有对尺度变化、低纹理图像等具有较好的鲁棒性,且该算法设计的LBD描述子
10、计算速度较快。但当图像中含有旋转变化时,LBD存在不能解决图像遮挡的问题。Fan等人5从两点和一线出发来探索了一个仿射不变量。他们利用这种仿射不变量来匹配具有已知点对应关系的线。该算法的主要缺点是需要已知的极线几何或点对应关系。此外,由于缺乏良好的点对应关系,所以在低纹理场景中的性能受到限制。总之,以上这些基于手工设计的局部图像特征直线描述算法各有各的优势与缺陷。上述文献中该类算法的文献不仅年份相对较早,而且在复杂条件下的图像特征直线匹配问题时,其已经无法获得令人满意的结果,进而限制了直线特征匹配在其他应用中的运用。进而证明由研究人员的专业知识驱动的手工设计算法不仅逐渐淡出了历史的舞台,而且性
11、能也已经走入了瓶颈期。2 基于深度学习的局部图像特征直线描述算法2012年以来,随着深度学习在图像分类、局部图像特征点描述、行人在识别、目标检测与识别等诸多计算机视觉任务中的成功应用,相关研究者也已经提出了一些优良且由数据驱动的基于深度学习的局部图像特征直线描述算法,它们表现出比基于手工设计的特征直线描述子更好的匹配性能。Liu等人6首先构造了一个名为HLines的大规模线数据集,然后在基于学习的特征点描述算法HardNet和L2-Net启发下,提出了基于学习的特征线描述符LPDNet(如图3所示),实验结果表明,描述符LPDNet优于手工设计的特征线描述符,特别是在视角、尺度和模糊变化图像上
12、表现出更大的优势。此外,又将其应用到特征曲线匹配当中,实验结果证明,与现有的特征线描述符相比,LPDNet具有更广泛的适用性。霍等人7通过直接从原始局部图像块中进行训练学习而获得直线特征描述子LP-HardNet,并在相关实验中取得了良好的性能,但由于构造的训练样本缺乏多样性,该方法对遮挡和低纹理变化较为敏感。Huo等人8首先构造了一个线数据集GDLFpatches,接着探索了基于FCNNS和迁移学习的三种神经网络架构:CS S-Net(如图4所示)、CS PS-Net(如图4所示)、CS 2-Channel-Net(如图5所示),经过实验表明,提出的三种描述子优于现有的手工设计描述子,特别是
- 配套讲稿:
如PPT文件的首页显示word图标,表示该PPT已包含配套word讲稿。双击word图标可打开word文档。
- 特殊限制:
部分文档作品中含有的国旗、国徽等图片,仅作为作品整体效果示例展示,禁止商用。设计者仅对作品中独创性部分享有著作权。
- 关 键 词:
- 局部 图像 特征 直线 描述 算法 综述 苗苗
1、咨信平台为文档C2C交易模式,即用户上传的文档直接被用户下载,收益归上传人(含作者)所有;本站仅是提供信息存储空间和展示预览,仅对用户上传内容的表现方式做保护处理,对上载内容不做任何修改或编辑。所展示的作品文档包括内容和图片全部来源于网络用户和作者上传投稿,我们不确定上传用户享有完全著作权,根据《信息网络传播权保护条例》,如果侵犯了您的版权、权益或隐私,请联系我们,核实后会尽快下架及时删除,并可随时和客服了解处理情况,尊重保护知识产权我们共同努力。
2、文档的总页数、文档格式和文档大小以系统显示为准(内容中显示的页数不一定正确),网站客服只以系统显示的页数、文件格式、文档大小作为仲裁依据,平台无法对文档的真实性、完整性、权威性、准确性、专业性及其观点立场做任何保证或承诺,下载前须认真查看,确认无误后再购买,务必慎重购买;若有违法违纪将进行移交司法处理,若涉侵权平台将进行基本处罚并下架。
3、本站所有内容均由用户上传,付费前请自行鉴别,如您付费,意味着您已接受本站规则且自行承担风险,本站不进行额外附加服务,虚拟产品一经售出概不退款(未进行购买下载可退充值款),文档一经付费(服务费)、不意味着购买了该文档的版权,仅供个人/单位学习、研究之用,不得用于商业用途,未经授权,严禁复制、发行、汇编、翻译或者网络传播等,侵权必究。
4、如你看到网页展示的文档有www.zixin.com.cn水印,是因预览和防盗链等技术需要对页面进行转换压缩成图而已,我们并不对上传的文档进行任何编辑或修改,文档下载后都不会有水印标识(原文档上传前个别存留的除外),下载后原文更清晰;试题试卷类文档,如果标题没有明确说明有答案则都视为没有答案,请知晓;PPT和DOC文档可被视为“模板”,允许上传人保留章节、目录结构的情况下删减部份的内容;PDF文档不管是原文档转换或图片扫描而得,本站不作要求视为允许,下载前自行私信或留言给上传者【自信****多点】。
5、本文档所展示的图片、画像、字体、音乐的版权可能需版权方额外授权,请谨慎使用;网站提供的党政主题相关内容(国旗、国徽、党徽--等)目的在于配合国家政策宣传,仅限个人学习分享使用,禁止用于任何广告和商用目的。
6、文档遇到问题,请及时私信或留言给本站上传会员【自信****多点】,需本站解决可联系【 微信客服】、【 QQ客服】,若有其他问题请点击或扫码反馈【 服务填表】;文档侵犯商业秘密、侵犯著作权、侵犯人身权等,请点击“【 版权申诉】”(推荐),意见反馈和侵权处理邮箱:1219186828@qq.com;也可以拔打客服电话:4008-655-100;投诉/维权电话:4009-655-100。