基于深度相机的采摘机器人视觉SLAM算法研究

来源 :桂林电子科技大学 | 被引量 : 0次 | 上传用户:lqzhou
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
采摘机器人对实现农业自动化有非常重要的作用,新的智慧农业生产模式促进了相关技术的研究。近年来,采摘机器人的开发主要包括自主移动技术、机械手设计和采摘对象的检测识别。在整个生产和收获过程中,自主移动是采摘机器人最基本、最重要的能力,结合机器视觉的同时定位与建图(Simultaneous Localization and Mapping, SLAM)成为研究热点。为了提高采摘机器人定位和建图的准确性和鲁棒性,本文研究采摘机器人的位姿估计和位姿优化算法,设计基于深度相机的视觉SLAM系统。主要内容如下:
  学习视觉SLAM技术的理论框架和基本算法,开展以深度相机作为感知设备的视觉SLAM系统研究。掌握Kinectv1获取彩色图和深度图的原理,基于机器人操作系统(Robot Operating System,ROS)进行开发,完成了采摘机器人模型的建立、可视化与运动控制。
  为了解决视觉SLAM前端的采摘机器人位姿估计问题,提出基于四叉树的ORB图像特征算法以及位姿计算方法。以ORB图像检测算法为基础,针对检测中存在的特征点提取不均匀问题,运用四叉树均匀处理对现有方法进行改进,实现提取的特征点能均匀分布于图像的目的,有效促进特征点对的快速匹配和误匹配之间的剔除。通过良好的数据匹配信息,融合随机采样一致性算法的思想,结合EPNP和迭代最近点法求解位姿,获取多次迭代后的最优位姿。使用TUM数据集进行实验,验证了改进算法的有益效果。
  针对累积误差造成位姿估计不准确的问题,提出基于视觉SLAM的采摘机器人位姿优化算法,实现全局轨迹的一致性。介绍图优化的基本理论,基于词袋模型进行相似度计算得到回环信息,设计关键帧的选择标准优化数据规模,选取关键帧集合,以待优化位姿变量作为节点,节点间的估计位姿约束和回环约束作为边,使用通用图优化求解器(General graph optimization,g2o)构造并优化位姿图结构实现位姿优化。实验结果表明,优化算法的各项性能指标显著提高,轨迹估计误差减小。
  设计视觉SLAM系统的总体框架和算法流程,实现采摘机器人在仿真和实验平台的研究。仿真情况下,利用ROS中的Gazebo插件设计物理仿真环境,通过发布节点的运动控制方式完成采摘机器人模型的移动,验证视觉SLAM系统的可靠性。开展采摘机器人在真实环境的定位和建图实验,并且与RGB-DSLAMv2方法作对比,结果显示出良好的定位和建图效果,说明本文系统的鲁棒性和准确性更高。
其他文献
行人重识别技术是指识别跨摄像机拍摄到的行人图像是否属于同一个人的方法。随着视频监控技术的提高,视频监控数据呈爆炸式增长,一一标注耗时耗力,因而有监督行人重识别方法在实际应用中具有局限性。为了使得模型具有自适应性,一种行之有效的方案是将问题建模为基于无监督迁移学习的行人重识别,这是一个有挑战的任务:一方面,目标域数据集无标签,因而不能充分被利用;另一方面,由于收集自不同环境,源域和目标域样本的数据分布存在差异。现有的方法往往通过创建一个共享的特征空间或者估计无标注数据伪标签的方式来解决域差异问题。前者往往忽
聚类(Clustering)技术是机器学习中非常重要的一种非监督学习方式。通常,聚类算法依据某种准则将相似的样本指派到同一个类中、将不相似的样本指派到不同的类中。聚类算法最常见的输入是相似性(相异性)矩阵,矩阵中的元素表示对应两个样本间的相似性(相异性)。关联聚类是一种特殊的聚类技术,其输入是一个同时表示样本间相似性和相异性的符号网络,在符号网络中用正边表示对应样本之间的相似性、用负边表示对应样本之间的相异性。关联聚类的目标是使得到的聚类结果中正边尽量存在于类内、负边尽量存在于类间。
  传统的关联
近年来,知识表示学习受到了广泛关注,其旨在将知识图谱中的实体和关系表示为稠密低维的实值向量,以便高效地计算实体和关系之间的语义联系,并可以将学习到的知识表示应用到知识图谱补全、关系抽取以及自动问答等下游任务中,提升所对应的各类模型的性能。
  随着对知识表示学习研究的不断深入,一些研究学者将工作重心从改进模型本身转移到了除此以外的其他方面,包括多源信息融合以及负采样等。本文着眼于这两个方面,提出了一种新颖且有效的模型,通过采用注意力机制去捕获其他方法中人工制定的规则所涵盖的信息,解决了一些模型在融合
近年来物联网迅速发展,各类低功耗节点呈现指数级增长。然而这些节点往往采用电池供能,整个网络的寿命受限于电池容量。无线能量传输技术的出现打破了这一瓶颈。无线能量传输是一种利用射频信号为设备进行无线充电的技术。采用这种技术可以为低功耗节点持续供电,避免节点因能量耗尽而设备失效。为物联网配置无线能量传输技术可以有效延长物联网生命周期,拓展应用范围。在将物联网与无线能量传输二者融合的过程中,本质上是将无线能量传输系统与无线通信系统二者合二为一,形成基于无线能量传输的通信系统。对基于无线能量传输的通信系统进行优化设
足球运动被誉为“世界第一运动”,拥有着世界上最庞大的观众群体。而导播视频是足球比赛传播的最主要途径。通常来说一场足球比赛的导播是通过布置在场地周围的多个摄像机位、工作人员和数名专业导播人员共同制作生成的。但是这种导播方式在给人们带来高质量的观赏体验的同时,所需的导播成本也非常高,不仅需要大量的人力物力,而且对导播人员的专业素质和专业能力也有较高的要求。然而像非职业联赛、校园足球等中小型比赛举办频率高、规模小、花费开销有限,不能承担专业导播的高昂花费。
  因此本研究从全景足球视频出发,开展全景足球视
面对防汛救灾和疫情防控的双重考验,郑州大学将灾情疫情当作一次深化党史学习教育的生动实践、一堂筑牢理想信念基石的思政大课、一本弘扬爱国主义精神的鲜活教材,将党史学习教育成果转化为激励全校师生奋勇向前的精神力量,以实际行动坚决打赢抗洪防疫两场硬仗。  未雨绸缪,迅速响应,坚决扛牢政治责任  面对汛情、疫情,郑州大学坚持早谋划、早部署、早行动,把党史学习教育与防汛救灾、疫情防控结合起来,总结运用党在不同
期刊
在抗击疫情、抢险救灾的这段时间里,我们每时每刻都在被一张张坚毅的面孔、一双双磨破的手足、一封封决心坚定的请战书、一批批勇敢的志愿者感动着。他们勇往直前、逆流而上、不论生死、不计报酬,这是一种精神的生动实践与彰显,更是一堂鲜活生动的思政大课。  这一堂课使我们认识到了党的领导始终是战胜一切艰难险阻的核心,这一堂课使我们认识到了集中力量办大事的中国特色社会主义的制度优势,这一堂课使我们认识到了中国人民
期刊
传统的被动消噪方法只对降低中高频噪声有效,对低频噪声的降噪效果低微,主动噪声控制技术的出现解决了这个难题。滤波-X最小均方(Filtered-XLeastMeanSquare,简称FXLMS)算法和滤波残差最小均方(Filtered-Error Least Mean Square, FELMS)算法是主动噪声控制算法中使用广泛的两种算法,具有控制效果好、成本低、运算量小的优点。但它们在降噪过程中并未充分考虑人耳的主观响应。掩蔽效应作为人耳一种重要的主观响应,FXLMS算法可与掩蔽效应结合起来,在改善降噪效
在安全监控、人员搜救、辅助驾驶等方面,红外人体目标检测与跟踪具有不受外界环境影响、能够全天候工作的特点,但由于红外成像信息单一、低信噪比以及人体的非刚体特点限制了红外人体目标检测与跟踪的进一步发展。本文针对静止背景中多种情境下红外人体目标检测率低、跟踪不准确的问题进行研究,以提高目标的检测率和跟踪的鲁棒性。
  通过对现有红外人体目标检测算法进行分析,得出三帧差分法具有计算量小、实时性好、适用目标运动较快的特点;背景差分法具有应用范围广、准确度高、适用目标运动较慢的特点。本文提出了一种将上述两种算法
本次全省高校党委宣传部长综合能力提升专题培训班的重要内容之一,是“高校宣传部长主题论坛”。该环节共设有4个分论坛,每个分论坛一个主题,分别围绕“责——意识形态责任制如何贯彻落实”“策——主动宣传如何‘声入人心’”“稳——突发事件如何化解危机”“融——网络育人如何扎实推进”,各由4位高校宣传部长结合自身工作及遇到的实际问题进行分享。每个分论坛还邀请两名专家对宣传部长的发言进行点评。《河南教育》(高等
期刊