计算机视觉技术在钢结构桥梁安全检查中的应用综述.pdf
《计算机视觉技术在钢结构桥梁安全检查中的应用综述.pdf》由会员分享,可在线阅读,更多相关《计算机视觉技术在钢结构桥梁安全检查中的应用综述.pdf(8页珍藏版)》请在咨信网上搜索。
1、第41卷第8 期2023年8 月文章编号:10 0 9-7 7 6 7(2 0 2 3)0 8-0 0 0 9-0 8市放技术Journal of Municipal TechnologyVol.41,No.8Aug.2023D0I:10.19922/j.1009-7767.2023.08.009计算机视觉技术在钢结构桥梁安全检查中的应用综述岳岩,刘宇飞*(清华大学土木工程系,北京10 0 0 8 4)摘要:我国有巨大的桥梁运维需求,而传统的钢结构桥梁安全检查方式主要为人工巡检,其因存在效率低下、危险性高等问题已难以满足日益增长的桥梁运维需求。近年来,计算机视觉技术逐渐进入桥梁安全检查领域,其
2、因具有成本低、效率高、智能化的特点得到了广泛应用。从计算机视觉技术的图像信息采集和病害识别两个方面入手,对近年来国内外的研究成果进行总结,包括不同的钢结构桥梁表面视觉信息获取方案和不同的裂缝识别算法,最后对计算机视觉技术在桥梁安全检查中的应用进行了总结与展望。关键词:桥梁安全检查;计算机视觉;图像采集;裂缝识别中图分类号:U448.36Abstract:China has a huge demand for bridge operation and maintenance.The traditional bridge safety inspectionmethod is mainly manu
3、al inspection,which is difficult to meet the growing demand of bridge operation and mainte-nance due to low efficiency and high danger.In recent years,computer vision technology has gradually entered thebridge safety inspection field and widely used because of low cost,high efficiency and intelligen
4、ce.Two aspects ofimage information acquisition and disease image recognition of computer vision technology are introduced in this pa-per.The research results are summarized at home and abroad in recent years,including different bridge surface vi-sual information acquisition schemes and different cra
5、ck recognition algorithms.Finally,the application of computervision technology in bridge safety inspection is summarized and prospected.Key words:bridge safety inspection;computer vision;image acquisition;crack detection文献标志码:AReview of Application of Computer Vision Technology inSteel Bridge Safety
6、 InspectionYue Yan,LiuYufei*(Department of Civil Engineering,Tsinghua University,Beijing 100084,China)目前我国已经成为世界上在役桥梁数量最多的国家。据交通运输部统计,截至2 0 2 1年底我国有超过96 万座公路桥梁,总长度达到7 38 0.2 1万延米1。巨大的桥梁数量带来了巨大的桥梁运维需求2。但收稿日期:2 0 2 3-0 6-30基金项目:国家自然科学基金(52 192 6 6 2)作者简介:岳岩,男,在读硕士研究生,主要研究方向为工程结构损伤识别与性能评估。通讯作者:刘宇飞,男,副研
7、究员,博士,主要研究方向为工程结构损伤识别与性能评估。引文格式:岳岩,刘宇飞.计算机视觉技术在钢结构桥梁安全检查中的应用综述J.市政技术,2 0 2 3,41(8):9-16.(YUEY,LIUYF.RevieWofapplication ofcomputer vision technology in steel bridge safety inspectionJJ.Journal of municipal technology,2023,41(8):9-16.)现有的桥梁病害检测技术却越来越无法满足实际工程的需求。传统的人工巡检主要依靠作业人员目视判定桥梁病害,除了效率低下、检测结果受作业人
8、员主观判断影响大之外,还存在一定的危险性;现10有的智能检测技术如流探伤、超声波检测、声发射测试等技术耗时耗力,需要专业设备,并且对操作人员的专业性要求较高,不适用于大规模桥梁病害检测3。近些年,计算机视觉技术逐渐在结构智能检测中得到应用,其以检测成本低、对作业人员要求低、适用性好等特点,为桥梁病害检测提供了新途径,得到了越来越广泛的应用。基于计算机视觉技术的检测方法主要包括图像信息采集与病害识别两大部分。笔者分别从这两个部分人手,对近年来使用计算机视觉技术进行钢结构桥梁安全检查的研究现状进行综述。1钢结构桥梁表观病害检测需求与其他结构类型相比,钢结构具有强度高、自重小、施工方便、抗震性能好等
9、优点,在桥梁中应用广泛。与此同时,钢结构也普遍存在着由于强度、腐蚀等问题导致的病害。钢结构桥梁的主要表观病害包括钢材锈蚀、钢材开裂、螺栓脱落等。1)钢材锈蚀钢材锈蚀是因构件表面涂层破损,金属与空气直接接触发生化学作用所致。涂层在荷载作用下劣化后起泡,逐渐发展成涂层开裂与剥落,导致钢材直接暴露在空气中,发生锈蚀,在气候温暖潮湿地区尤为常见4。由于锈蚀部分不再受力,钢截面实际受力面积减少,因此结构的承载力和刚度降低。图1展示了钢材表面锈蚀情况。Journal of Municipal Technology第41卷全隐患5。图2 展示了实际钢材开裂与计算机视觉技术识别结果。图2 钢材开裂与计算机视觉
10、技术识别结果Fig.2 Steel crack and computer vision identification result3)螺栓脱落螺栓脱落的原因包括:螺栓本身存在质量问题,如生产过程中混入杂质导致螺栓局部晶界脆化;使用阶段的客观条件造成螺栓断裂,如施工误差导致的受力不均或疲劳荷载导致的应力重分布均会造成螺栓断裂6。图3展示了钢结构中螺栓脱落现象。图3钢结构中螺栓脱落Fig.3 Bolt missing in steel structures在上述病害发生后,由于缺少适当的养护,大量钢结构桥梁的承载力和刚度降低,安全性和服务性能受到严重影响。“十三五”期间,全国共投人资金697亿元,
11、改造危桥3.4万座。适当的养护可以提升钢结构桥梁的服役寿命和性能,而对表观病害进行图1钢材表面锈蚀Fig.1 Steel surface rusting2)钢材开裂钢结构开裂有多种可能的原因,包括疲劳开裂、残余应力、初始缺陷、脆性破坏等,多发于焊缝、开孔、加劲肋等部位。开裂会导致应力集中,断裂部分退出工作,进而可能导致结构破坏,存在较大的安检测是进行养护的前提。钢结构桥梁表观病害检测存在巨大的需求。2桥梁表面视觉信息获取获取病害图像信息是使用计算机视觉技术进行桥梁病害检测的第一步。为了规避人工目视检测可能存在的由于可达性、光照条件、视力、色觉和主观第8 期因素等差异对检测结果的影响,有必要通过
12、既定的标准化程序收集桥梁表面视觉信息7。2.1视觉信息采集硬件设施在钢结构桥梁安全检查中,需依靠一定的硬件设施实现桥梁表面待检区域的可达性。现有的硬件设施包括桥梁检查车、移动机器人、无人机等。2.1.1桥梁检查车桥梁检查车根据工作形式可以分为移动式和固定式两类8。移动式检查车是在重型车辆上安装可活动的吊篮、桁架或机械臂,将检测人员或装置运送到梁侧和梁底待检区域进行检测与信息采集。相较于传统的人工巡检依靠脚手架或吊绳帮助人员到达待检区域,移动式检查车节省了架设支撑设施的时间,并在一定程度上保障了检测人员的安全性;但使用移动式检查车进行桥梁安全检查时需要封闭交通,且仍然无法规避人工巡检存在的主观判
13、断影响问题。固定式检查车,也叫悬挂轨道桁车,是在桥梁梁侧安装轨道,轨道上架设伸缩桁架或旋转桁架检查车实现跨桥墩的移动,以此搭载人员或设备对梁侧和梁底进行检测9,其覆盖范围大、承载能力高,并且作业在梁底进行,无需中断交通。Baptiste等10 设计了一种半自主移动式检查车来进行桥梁检测,可拍摄梁桥、拱桥桥侧的图像并将其存储在桥梁的CAD模型中。该系统包含1辆卡车、1个用于对桥梁进行拍照的活动机器机构以及1套用于将图像与桥梁CAD模型自动关联起来的软件,检测人员可以远程在CAD软件中浏览桥梁表面的照片,以检测桥梁表面病害。Oh等11开发了一套由重型车辆、机器人装置、运动控制系统和机器视觉系统组成
14、的机器人系统用于桥梁安全检查。其中重型车辆配备了7 个由液压驱动的多连杆机构,用以将机器人装置运送到桥梁待检位置;机器人装置上搭载电机系统、机器视觉系统和各种传感器以采集桥梁表面图像。梅仕伟等12 设计了一种并行桥梁检查车,轨道呈倒T形布置在双箱双室钢箱梁桥中间,检查平台向两侧伸开以进行梁底和梁侧的视觉信息采集。在使用桥梁检查车进行钢结构桥梁安全检查的研究中,视觉信息主要通过人工操作或自动控制相机进行图像采集,后续仍需通过不同方法对图像中包含的病害进行识别,自动化程度较低。2.1.2移动机器人随着机器人技术的发展,近年来使用移动机器岳岩等:计算机视觉技术在钢结构桥梁安全检查中的应用综述11人进
15、行钢结构桥梁表面图像采集的研究也逐渐兴起。移动机器人通过磁体等方式吸附在钢结构桥梁表面,并能搭载不同视觉传感器进行图像和点云的采集。同时,机器人可以通过获取的视觉信息进行自动路径规划,实现桥梁检测的自动化。Lim等13开发的ROCIM系统集成了1台移动机器人、1台相机和1个激光传感器,依靠其提出的路径规划策略在桥面板上移动并采集不同位置的图像数据;La等14开发了一套自主机器人系统,其上搭载了多种传感器、制动器和计算设备,通过2 个RTKGPS单元、1个前置和2 个侧置激光扫描仪、1个IMU传感器进行机器人导航和运动规划,通过2台高分辨率相机和1台36 0 全景相机进行桥面信息采集;陈然15提
16、出了一种蛇形机器人进行桥梁缆索检测,该机器人由1个头关节和2 9 个身体关节组成,蛇体关节采用正交关节连接以使其能在复杂环境中运动,为增大蛇体与缆索表面的摩擦系数,采用高摩擦系数的耐磨材料制作蛇体外皮,机器人头部和尾部可搭载不同的检测设备,实现对桥梁表面图像信息的采集;陈瑶等16 利用爬壁机器人安装微型摄像头进行桥梁表面图像采集,该仿生足式壁面攀爬机器人凭借活动结构与仿生设计可以实现在一般粗糙度的竖直壁面上攀爬,装载简易的摄像头后可通过无线方式实时获取壁面图像,用于桥梁结构的裂缝检测。2.1.3无人机自2 0 17 年以来,越来越多的研究者在桥梁检测中使用无人机装置获取桥梁表面视觉信息。无人机
17、可搭载多种类型的传感器,通过相机、红外热成像、激光雷达等高分辨率装置对桥梁结构整体及局部进行多角度拍摄17。Kim等18 提出一种基于带有高分辨率视觉传感器的商用无人机在桥梁中进行病害图像获取的方法,并使用卷积神经网络来识别和量化裂缝;Sattar等19使用无人机搭载不同型号的相机进行实际桥梁裂缝检测,同时研究了相机分辨率和表面光照条件对检测能力的影响;Li等2 0 提出了无人机悬停精度双RTS系统,用于获取无人机的位移和姿态角变化,成功在更远距离上获得了高质量的图像,且在悬停模式下有更好的稳定性;Chen等2 1设计了一个无人机搭载雷达进行桥梁表面三维重建和损伤检测的方案,并提出了相应的评估
18、机制,包括检查数据覆盖、分析数据点分布、评估噪声和测量几何精12度等。无人机为钢结构桥梁安全检查提供了较好的可达性,为大型桥梁的安全检查提供了可能。但目前大多数无人机的续航时间和承载能力不足,难以满足大跨度桥梁长时间、大范围检测的需求,如何提高无人机的续航时间和承载能力将成为未来研究的重点之一2 2 2.2视觉数据类型2.2.1图像在钢结构桥梁安全检查中,图像是最常见的数据类型,可通过搭载单目或多目相机来获得,再通过Journal of Municipal Technology第41卷检测算法对图像中是否存在病害进行检测2 3,图4所示为钢梁裂缝图像数据集。Jahanshahi等2 5在桥梁上
19、安装可自由旋转和缩放的摄像头以帮助检测人员远程获取桥梁图像,并可与此前存档的数据进行比较以发现病害;申宇2 6 对视觉测量结构变形的原理进行了研究,设计了一套双目立体视觉结构变形监测系统,进行了系统硬件和软件开发,为结构变形监测提供了一套解决方案。在钢结构桥梁安全检查中使用图像作为主要视觉数据的优势在于容易获取,且可根据具体场景需要选择不同规格的相机型号以获得大小和分辨率合适的图像。20Ucreck,01jpgerock.02ipgcreck,11ipgcrak.12ipgL-7cmL-7Garack.21jpgerack:22ipg2072017crack31jpgerack.a2jpg15
20、.2-3=9crack.41jig2.2.2点云点云是三维计算机视觉常用的数据类型,通过三维空间中的点集合来表示物体的三维形态,可通过SFM、激光扫描等方法获得2 7。图5展示了某桥梁三维点云模型。通过获取桥梁点云,可以获得桥梁构造信息,并对结构变形和杆件断裂等进行检测。此外,点云数据还可以提供给检测机器人,供其在运动过程中进行自动路径规划。Tzortzinis等2 8 将3D扫描得到的桥梁点云与有限元解结合,据此估算出受腐蚀钢梁的承载能力;Zhang等2 9通过3D扫描仪获取桥梁几何特征如板块边界、板块连通性、板块厚度变化等,以此建立桥梁有限元模型并对其遭受腐蚀损伤后的剩余承载力进行估算;B
21、ui等30 开发的钢结构桥梁检测机器人可以通过3D点云进行边界点估计,计算出包含足够运动区域的表面,并将其作为运动轨迹规划的依据。erack,03jpgHcrack.13jipgcrack.14.ipgcrock23jpgcrack24jpgL=30mL=L-Cocrack.3jogerack.34jpg3.1.4L4tmLcrack42i00crack.43jporack,04jps3crack.4ipaFig.4 Image dataset of steel girder cracks2.3检查对象计算机视觉技术对钢结构桥梁进行检查的主要目标包括裂缝、疲劳、锈蚀、腐蚀、螺栓断裂、结构变形等
22、。2.4小结对检索到的文献根据视觉信息采集的硬件方案、视觉数据类型及研究目标进行总结,结果如表1所示。*05jpcrack.15ipg4crack.25ipg215.24t1crackasipgerack.45jog图4钢梁裂缝图像数据集2 4crack,06.jpgcrack.16jpgcracd.26jigcrack.36jigerack.46jigack.07.crack.17ipgL-45cn(LZ74:4-30cack.27jpg764u助1450bCmcrack.37Jipg5orack.47ipg图5桥梁三维点云模型Fig.5 3D point cloud model of a
23、bridgekcrack.18jipg1454bCeeradk.38ipgerack.4ajigcrack.o9jpgcrack.19jpgL-45Gm144-30crack.29jipg144crack.a9jipgcrack.40jigcoaedk.10jpg207207.1242crack.20ipgconack.30jpg1523erack,40jpg第8 期Tab.1 Hardware scheme,data type and research target of visual information acquisition in steel bridge inspection文献8
24、11 12 13 14 15 16 18 1920 21 30 31 323334 35 36 373839 40 41 4243 443病害识别方法3.1识别方法分类在获得桥梁的数字图像后,需经过图像预处理,再通过病害识别算法来判断图像中是否存在病害3。图像预处理可以分为去噪与图像增强两步。去噪的主要方法有灰度化与中值滤波、连通域判断与主成分分析等,图像增强包括阈值分割、图像锐化等45。将经过预处理的图像输人检测算法,判断图像中是否存在病害。应用较多的裂缝识别算法包括阈值算法、边缘算法、区域算法、匹配算法、深度学习算法等3。其中前4种算法直接使用图像处理技术对裂缝进行检测,需要预先定义裂缝特
25、征或进行图像预处理,其算法是为特定场景下的图像定制的,在新的场景下性能难以保证。因此,这4种算法在应用中只起到辅助作用,最终结果仍然需要依靠人工判断46。深度学习算法依靠大样本进行特征学习47,其岳岩等:计算机视觉技术在钢结构桥梁安全检查中的应用综述表1钢结构桥梁安全检查视觉信息采集的硬件方案、视觉数据类型及研究目标硬件方案视觉数据类型固定式检查车图像移动式检查车图像固定式检查车图像机器人图像桥面机器人图像机器人图像爬壁机器人图像无人机图像无人机图像无人机图像无人机图像、点云自主导航机器人图像、点云尺机器人图像攀爬机器人图像地面机器人、无人机图像攀爬机器人图像、点云磁轮机器人图像、点云机器人图
- 配套讲稿:
如PPT文件的首页显示word图标,表示该PPT已包含配套word讲稿。双击word图标可打开word文档。
- 特殊限制:
部分文档作品中含有的国旗、国徽等图片,仅作为作品整体效果示例展示,禁止商用。设计者仅对作品中独创性部分享有著作权。
- 关 键 词:
- 计算机 视觉 技术 钢结构 桥梁 安全检查 中的 应用 综述
1、咨信平台为文档C2C交易模式,即用户上传的文档直接被用户下载,收益归上传人(含作者)所有;本站仅是提供信息存储空间和展示预览,仅对用户上传内容的表现方式做保护处理,对上载内容不做任何修改或编辑。所展示的作品文档包括内容和图片全部来源于网络用户和作者上传投稿,我们不确定上传用户享有完全著作权,根据《信息网络传播权保护条例》,如果侵犯了您的版权、权益或隐私,请联系我们,核实后会尽快下架及时删除,并可随时和客服了解处理情况,尊重保护知识产权我们共同努力。
2、文档的总页数、文档格式和文档大小以系统显示为准(内容中显示的页数不一定正确),网站客服只以系统显示的页数、文件格式、文档大小作为仲裁依据,个别因单元格分列造成显示页码不一将协商解决,平台无法对文档的真实性、完整性、权威性、准确性、专业性及其观点立场做任何保证或承诺,下载前须认真查看,确认无误后再购买,务必慎重购买;若有违法违纪将进行移交司法处理,若涉侵权平台将进行基本处罚并下架。
3、本站所有内容均由用户上传,付费前请自行鉴别,如您付费,意味着您已接受本站规则且自行承担风险,本站不进行额外附加服务,虚拟产品一经售出概不退款(未进行购买下载可退充值款),文档一经付费(服务费)、不意味着购买了该文档的版权,仅供个人/单位学习、研究之用,不得用于商业用途,未经授权,严禁复制、发行、汇编、翻译或者网络传播等,侵权必究。
4、如你看到网页展示的文档有www.zixin.com.cn水印,是因预览和防盗链等技术需要对页面进行转换压缩成图而已,我们并不对上传的文档进行任何编辑或修改,文档下载后都不会有水印标识(原文档上传前个别存留的除外),下载后原文更清晰;试题试卷类文档,如果标题没有明确说明有答案则都视为没有答案,请知晓;PPT和DOC文档可被视为“模板”,允许上传人保留章节、目录结构的情况下删减部份的内容;PDF文档不管是原文档转换或图片扫描而得,本站不作要求视为允许,下载前自行私信或留言给上传者【自信****多点】。
5、本文档所展示的图片、画像、字体、音乐的版权可能需版权方额外授权,请谨慎使用;网站提供的党政主题相关内容(国旗、国徽、党徽--等)目的在于配合国家政策宣传,仅限个人学习分享使用,禁止用于任何广告和商用目的。
6、文档遇到问题,请及时私信或留言给本站上传会员【自信****多点】,需本站解决可联系【 微信客服】、【 QQ客服】,若有其他问题请点击或扫码反馈【 服务填表】;文档侵犯商业秘密、侵犯著作权、侵犯人身权等,请点击“【 版权申诉】”(推荐),意见反馈和侵权处理邮箱:1219186828@qq.com;也可以拔打客服电话:4008-655-100;投诉/维权电话:4009-655-100。