基于改进ORB-SLAM2的果园喷药机器人定位与稠密建图算法.pdf
《基于改进ORB-SLAM2的果园喷药机器人定位与稠密建图算法.pdf》由会员分享,可在线阅读,更多相关《基于改进ORB-SLAM2的果园喷药机器人定位与稠密建图算法.pdf(11页珍藏版)》请在咨信网上搜索。
1、doi:10.6041-1298.2023.07.0052023年月第54卷第7 期农报业学机械基于改进ORB-SLAM2的果园喷药机器人定位与稠密建图算法丛佩超崔利营万现全李佳星刘俊杰张欣(广西科技大学机械与汽车工程学院,柳州5456 16)摘要:针对果园喷药机器人视觉导航过程中定位精度低、地图构建效果差等问题,本文提出一种新的视觉定位与稠密建图算法。该算法基于ORB-SLAM2算法架构,首先,通过优化FAST角点、描述子阈值,并采取图像金字塔法与高斯滤波算法,剔除劣质ORB特征点,以提升图像关键顿质量和特征匹配精度。其次,引入稠密建图线程,利用点云恢复算法、统计滤波方法形成点云队列,采取点
2、云拼接技术与体素滤波算法输出稠密点云地图,并在ORB-SLAM2算法的ROS节点中增加关键顿输出接口与位姿发布话题,通过NeedNewKeyFrame函数选取ORB-SLAM2算法所生成的关键顿,减少系统计算量。最终,由RGB-D相机实现果园喷药机器人的精准定位与稠密建图。为验证本文算法的有效性与实用性,进行TUM数据集仿真分析与真实场景测试,结果表明:相较ORB-SLAM2算法,本文算法的绝对轨迹平均误差降低44.0 1%、相对轨迹平均误差降低7.93%,0 RB特征点匹配数量平均提升19.03%,定位精度与运行轨迹效果均有显著提升,此外,还能获取较高精度的果园喷药机器人工作场景信息。本文算
3、法可为果园喷药机器人的自主导航提供理论基础。关键词:果园;喷药机器人;ORBSLA M 2;高斯滤波;精准定位;稠密建图中图分类号:TP242.6文献标识码:A文章编号:10 0 0-12 98(2 0 2 3)0 7-0 0 45-11OSID:口Localization and Dense Mapping Algorithm for Orchard Spraying RobotBased on Improved ORB-SLAM2CONG PeichaoCUI LiyingWANXianquanLI JiaxingLIU JunjieZHANG Xin(School of Mechanic
4、al and Automotive Engineering,Guangxi University of Science and Technology,Liuzhou 545616,China)Abstract:In view of low localization accuracy and poor map construction during the visual navigation fororchard spraying robot,a visual localization and dense mapping algorithm was proposed.The algorithmw
5、as based on the ORB-SLAM2 algorithm architecture,firstly,through the optimization of FAST cornerpoints,descriptor thresholds,and adopting the image pyramid method and Gaussian filtering algorithm,poor quality ORB feature points were eliminated to improve the image key frame quality and featurematchi
6、ng accuracy.Secondly,the dense map building thread was introduced,the point cloud recoveryalgorithm and statistical filtering method were used to form the point cloud queue,the point cloudstitching technology and voxel filtering algorithm were adopted to output the dense point cloud maps,andthe key
7、frame output interface and position publishing topic were added in the ROS node of ORB-SLAM2 algorithm,and then the key frame generated by ORB-SLAM2 algorithm was selected through theNeedNewKeyFrame function to reduce the system computation.Finally,the RGB-D camera was used torealize the precise pos
8、itioning and dense mapping of the orchard spraying robot.In order to verify theeffectiveness and practicality of the algorithm,simulation analysis of TUM dataset and real scenariotesting were conducted.The results showed that compared with that of ORB-SLAM2 algorithm,theabsolute trajectory average e
9、rror of this algorithm was reduced by 44.01%,the relative trajectory averageerror was reduced by 7.93%,the average number of ORB feature point matching was increased by19.03%,and the positioning accuracy and running trajectory effect were improved significantly.Inaddition,the working scene informati
10、on of orchard spraying robot can be obtained with high accuracy.The algorithm can provide a theoretical basis for the autonomous navigation of orchard spraying robot.Key words:orchard;spraying robot;ORB-SLAM2;Gaussian filtering;precise positioning;densemapping收稿日期:2 0 2 2-11-0 22修回日期:2 0 2 3-0 1-2 0
11、基金项目:中央引导地方科技发展专项资金项目(桂科ZY19183003)和广西重点研发计划项目(桂科AB20058001)作者简介:丛佩超(198 0 一),男,副教授,博士,主要从事移动机器人自主导航定位研究,E-mail:c p c l z x 16 3.c o m46农2023年机业报学械0引言当前,我国水果品类丰富、产量稳居世界第一,但其种植区域多分布在丘陵地区。受地形条件影响,果园的农药喷施还以人工操作为主,该方式存在成本高、效率低、危害身体健康、环境污染大等问题。为解决上述问题,用于除草、喷药、采摘等工作的果园机器人不断涌现,其相关技术的研究已成为机器人领域的热点问题【1-2 果园喷
12、药机器人是将环境感知、目标识别、导航定位和运动控制等技术高度集成的智能化系统,精准定位技术是其中的关键问题之一。目前广泛使用的定位方法有:全球导航卫星系统(Clobal navigationsatellite system,G NSS)、激光雷达定位、视觉定位3-4。室外场景下CNSS 的应用最为广泛,其无遮挡情况下的定位精度可达厘米级5-7 。虽然卫星定位在室外空旷环境下的表现良好,但在枝叶茂密的果园环境中,遮挡造成的卫星信号丢失,会严重影响定位精度3。激光雷达定位精度高、抗干扰能力强“-。激光雷达虽能获得较高精度的位置信息,但在运动过程中易产生点云畸变和误匹配,且多线激光雷达价格较高10
13、1。视觉定位通过单目、双目和RGB-D相机不仅能够获得丰富的位置信息,而且其硬件成本低廉,功耗低、体积小、安装方便,适用于大范围的工作场景,被广泛地应用于移动机器人的导航问题。文献12-14 研究的视觉定位技术通常先由相机获取环境的目标信息,再通过图像分割等方法对目标图像进行处理,并利用Hough变换拟合导航路线,提高导航的定位精度。然而,果园喷药机器人的作业环境复杂多样,茂密的枝叶易导致图像分割失败,继而影响果园喷药机器人导航过程中的定位精度。视觉同时定位与建图(Simultaneouslocalizationandmapping,SLA M)技术可较好地解决复杂场景下的定位与建图问题,已成
14、为当前农业机器人领域的研究热点今为止,比较经典的视觉SLAM算法有MonoSLAML15、PT A M 16 、SVO 17 、O RB-SLA M 18 等。其中,MUR-ARTAL研究团队18 提出的ORB-SLAM系统,利用单目相机完成了全自动初始化,其在室内、外环境下均可实时运行,且具有较好的鲁棒性,与当时其它单目SLAM算法相比,实现了前所未有的性能。之后,该团队19 又提出了一种基于特征点法的ORBSLA M 2 算法,它主要由跟踪、局部建图、回环检测三大线程组成,在大场景下实现了移动机器人的高精度定位与稀疏点云地图构建。李盛辉等2 0 提出了一种基于全景相机的视觉SLAM算法,该
15、方法可应用于真实农业环境下的智能车辆自主导航,其定位平均误差0.10 8 m。李月华等2 1 提出了一种基于人工信标修正的视觉SLAM算法,该算法利用双目相机实现了工厂环境下自动引导车的自主定位,其定位误差不超过0.1m。黎达等2 2 提出了一种双目视觉SLAM算法,利用地面、树木等周围环境的纹理信息,可实时确定相机传感器的空间位置和姿态,其均方根误差不超过0.9m。董蕊芳等2 3提出了一种改进型的ORB-SLAM2算法,通过融合环境的3D、2 D 占据信息、路标点空间位置以及视觉特征等信息,实现了轮式机器人在森林公园内的准确定位,其定位误差不超过1.43m。上述视觉SLAM方法在农、林等复杂
16、环境下的定位虽然取得了一定的效果,但相应的精度还有很大提升空间,特别是针对稠密果园环境的视觉定位和建图方法仍然比较欠缺2 4。因此,研究适用于果园喷药机器人的定位与稠密建图方法,具有重要的现实意义2 5。基于以上分析,为进一步改善果园喷药应用场景下机器人定位与建图能力,本文提出一种改进的ORBSLA M 2 定位与稠密建图算法,以ORB-SLAM2为基础,围绕图像像素亮度的差异性,引入噪声抑制机制与高斯滤波,优化ORB特征点的提取过程;借助局部建图线程的优质关键顿,运用点云滤波处理与位姿处理技术,构建稠密建图线程。1算法框架及视觉SLAM理论基础1.1算法框架ORBSLA M 2 算法是基于特
17、征点法的实时SLAM开源算法,但其构建的三维稀疏点云地图仅保留图像的部分ORB特征点,且建立的地图表征不够充分,缺少占据信息,难以描绘地图中的障碍物,因此,ORB-SLAM2算法仅适用于机器人的空间定位2 3。此外,果园环境复杂多样、纹理缺失,也易造成果园农药喷洒机器人的视觉定位精度不足,无法满足路径规划等任务的需求2 6 。针对上述问题,本文提出基于改进ORB-SLAM2算法的果园喷药机器人定位与稠密建图算法,如图1所示。该算法基于ORB-SLAM2算法框架,保留原有的局部建图与回环检测线程19,在跟踪线程中优化FAST角点、描述子阈值,利用高斯滤波对图像进行处理,并采用图像下采样方法形成高
18、斯图像金字塔,实现ORB特征提取过程的优化,以降低劣质特征点数量,提高算法的关键帧质量及特征匹配准确率,从而改善算法的定位精度。此外,本文算法增加稠密建图线程,将相机周围场景以三维稠密点云地图的形式呈现,实现稠密地图的构建功能,以备果园喷药机器人后续47丛佩超等:基于改进ORB-SLAM2的果园喷药机器位与稠密建图算法第7 期跟踪线程优化ORB特征提取新关优化FAST地图关键顿跟踪相机图像高斯图像键顿角点、描述初始化重定位跟踪下采样计算金字塔决策子阅值稠密建图线程局部建图线程优质关键顿点云滤波点云位姿处理关键顿插人选择关键顿插人处理地图更新构建稠密地图地图点决策选择关键顿回环检测线程全局三维稠
19、密局部BA优化点云地图回环检测回环检测回环校正BA图1基于改进ORB-SLAM2算法的视觉定位与稠密建图算法框架Fig.1Visual localization and dense mapping algorithm framework based on improved ORB-SLAM2 algorithm自主导航。1.2视觉SLAM理论基础为实现果园喷药机器人的高精度定位与三维稠密地图构建,需有丰富的图像信息作为保证。基于经济性考虑,本文采用AstraRGB-D相机。果园喷药机器人通过RCB-D相机获取环境信息,如图2所示,机器人在posel、p o s e 2、p o s e N处观测
20、果园环境中路标点yi、y 2、Yn。通过视觉SLAM算法处理图像数据,根据相机的运动方程、观测方程估计相机位姿,再借助坐标系转换关系确定机器人的位置与姿态,以实现其自身的精准定位2 7 posepose2posel图2果园场景下的相机运动状态Fig.2Camera motion state in orchard sceneRGB一D相机的运动方程为x,=f(xt-1,P,q.)(1)其观测方程为zt.;=h(yi,x,w.)(2)式中相机t时刻位置Pi测量t时刻数据q测量t时刻噪声W.观测t时刻路标点噪声相机观测到的路标点相机在x,处对路标点y,的观测数据AstraRGB-D相机由RGB彩色相
21、机、红外传感器和接近传感器3部分组成,结构如图3所示。该相机通过搭载的光学相机和红外相机获取RGB图像,利用红外结构光原理获取目标图像对应的深度信息,为三维稠密地图重建提供丰富的三维场景点云数据,再由相机点云坐标系转换为全局点云坐标系,最终实现环境信息重建(2 8 1234图3AstraRGB-D结构Fig.3AstraRGB-D structure14.红外传感器2.接近传感器3.RGB彩色相机1、4.红外传感器2.接近传感器3.RGB彩色相机点云坐标系变换关系式为Woi=T.W(3)CCij式中T.ci第i个关键帧位姿W第i个关键顿的坐标系点云W全局坐标系点云2同时定位与三维稠密地图构建2
22、.1ORB特征点提取优化ORB特征由OrientedFAST角点、BRIEF描述子组成,其不仅计算速率和精度较高,还具备旋转、光照和尺度的不变性,以及匹配速度快、实时性高等特点。因此,ORB特征点提取在算法中起着至关重要的作用,其结果将直接影响定位的精度及建图效果2 9。但ORBSLA M 2 提取的特征点分布不均匀,且输出特征点重叠较多、质量较差。为解决该问题,本文提出一种如图4所示的特征点提取算法,其主要由5部分组成:FAST角点提取、BRIEF描述子计算、旋转角度计算、图像金字塔层数优化、高斯处理。2023年农48报机业学械FASTBRIEF描旋转角度图像金字塔高斯角点述子计算计算层数优
23、化处理提取图4特征点提取流程图Fig.4Flowchart of feature point extraction本文算法根据像素亮度不同进行FAST角点提取与描述子计算,引人噪声抑制机制,以优化ORB特征点的处理流程,如图5所示。首先,在图像中选取像素块P,假设其像素亮度为Lp,并设置亮度阈值为A。以P为中心,在半径为r的圆上选取16 个像素点,若存在连续12 个像素点的亮度不在区间Lp-A。,Lp+A。之内,则像素块P可列为优质特征点。对图中所有像素均重复以上步骤,筛选出图像中所有的优质特征点。其次,利用OpenCV库中的imread函数检测出OrientedFAST角点位置,依据角点位置
24、计算BRIEF描述子,设置其提取数量阈值范围为A,,A,,并在描述子阈值范围内选取关键点,且剔除范围以外的关键点,以提高SLAM系统特征点的质量。最后,采用OpenCV库中的BruteForceMatcher函数结合汉明距离对2 幅图像的描述子进行匹配,计算相邻点之间的极小值距离,若描述子间汉明距离大于2 倍极小值,判断其为误匹配。此时,运用随机采样一致性算法减少误匹配,抑制噪声,剔除外点,以提高系统定位精度。图5ORB特征点提取Fig.5ORB feature point extractionORB一SLAM2算法构建图像金字塔是对原图像进行多尺度结构表达。首先,按照图像比例因子进行逐级向下
25、采样;其次,采样后的图像按不同分辨率由高到低向上排列,进行不同层的角点匹配,从而解决尺度不变性问题。但当描述子数量较少时,易出现特征点提取与匹配精度下降的问题30 。为解决上述问题,通过优化图像金字塔层级,对图像进行高斯滤波,利用OpenCV的pyrDown函数形成高斯图像金字塔,如图6 所示。高斯图像金字塔从第K层生成第K+1层,利用高斯滤波对第K层进行卷积,删除所有的偶数行与列,具体计算过程为Fk=pyrDown(Fk+1)(4)式中Fk/Fk+1第K、K+1次下采样图像pyrDown-下采样函数第3层第K+2层第2 层第K+1层第1层第K层第0 屋第K-1层图6高斯图像金字塔Fig.6G
- 配套讲稿:
如PPT文件的首页显示word图标,表示该PPT已包含配套word讲稿。双击word图标可打开word文档。
- 特殊限制:
部分文档作品中含有的国旗、国徽等图片,仅作为作品整体效果示例展示,禁止商用。设计者仅对作品中独创性部分享有著作权。
- 关 键 词:
- 基于 改进 ORB SLAM2 果园 机器人 定位 稠密 算法
1、咨信平台为文档C2C交易模式,即用户上传的文档直接被用户下载,收益归上传人(含作者)所有;本站仅是提供信息存储空间和展示预览,仅对用户上传内容的表现方式做保护处理,对上载内容不做任何修改或编辑。所展示的作品文档包括内容和图片全部来源于网络用户和作者上传投稿,我们不确定上传用户享有完全著作权,根据《信息网络传播权保护条例》,如果侵犯了您的版权、权益或隐私,请联系我们,核实后会尽快下架及时删除,并可随时和客服了解处理情况,尊重保护知识产权我们共同努力。
2、文档的总页数、文档格式和文档大小以系统显示为准(内容中显示的页数不一定正确),网站客服只以系统显示的页数、文件格式、文档大小作为仲裁依据,个别因单元格分列造成显示页码不一将协商解决,平台无法对文档的真实性、完整性、权威性、准确性、专业性及其观点立场做任何保证或承诺,下载前须认真查看,确认无误后再购买,务必慎重购买;若有违法违纪将进行移交司法处理,若涉侵权平台将进行基本处罚并下架。
3、本站所有内容均由用户上传,付费前请自行鉴别,如您付费,意味着您已接受本站规则且自行承担风险,本站不进行额外附加服务,虚拟产品一经售出概不退款(未进行购买下载可退充值款),文档一经付费(服务费)、不意味着购买了该文档的版权,仅供个人/单位学习、研究之用,不得用于商业用途,未经授权,严禁复制、发行、汇编、翻译或者网络传播等,侵权必究。
4、如你看到网页展示的文档有www.zixin.com.cn水印,是因预览和防盗链等技术需要对页面进行转换压缩成图而已,我们并不对上传的文档进行任何编辑或修改,文档下载后都不会有水印标识(原文档上传前个别存留的除外),下载后原文更清晰;试题试卷类文档,如果标题没有明确说明有答案则都视为没有答案,请知晓;PPT和DOC文档可被视为“模板”,允许上传人保留章节、目录结构的情况下删减部份的内容;PDF文档不管是原文档转换或图片扫描而得,本站不作要求视为允许,下载前自行私信或留言给上传者【自信****多点】。
5、本文档所展示的图片、画像、字体、音乐的版权可能需版权方额外授权,请谨慎使用;网站提供的党政主题相关内容(国旗、国徽、党徽--等)目的在于配合国家政策宣传,仅限个人学习分享使用,禁止用于任何广告和商用目的。
6、文档遇到问题,请及时私信或留言给本站上传会员【自信****多点】,需本站解决可联系【 微信客服】、【 QQ客服】,若有其他问题请点击或扫码反馈【 服务填表】;文档侵犯商业秘密、侵犯著作权、侵犯人身权等,请点击“【 版权申诉】”(推荐),意见反馈和侵权处理邮箱:1219186828@qq.com;也可以拔打客服电话:4008-655-100;投诉/维权电话:4009-655-100。