复杂动态场景下视觉SLAM研究

来源 :重庆大学 | 被引量 : 0次 | 上传用户:mlj1234567890
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着人工智能和计算机视觉等相关技术的发展,机器人逐渐成为科技社会标志性产物之一。视觉SLAM是机器人完成自主移动和开展高层任务的前提条件,在科研和工业生产方面均具有重大研究意义。间接法视觉SLAM凭借运行稳定逐渐成为主流,在简单静态场景中的应用已经趋于成熟,但动态、低纹理、光线视角变化明显等复杂动态场景下仍处于探索阶段。一方面,动态目标会造成特征点的误匹配或不匹配,影响定位精度和建图效果。另一方面,大多数视觉SLAM使用的传统图像特征点基于人工设计的关键点和描述子,在低纹理、光线视角变化明显等场景下匹配性能不足以满足需求。本文首先研究动态场景下的视觉SLAM,动态目标过多时SLAM定位精度不高,甚至可能会失效。本文首先提出语义分割和几何紧耦合的动态目标检测算法,利用Mask R-CNN网络生成语义掩膜,并将其作为先验信息提高几何运动分割的精度,生成类似的几何掩膜。在此基础上,本文将动态目标检测算法集成进ORBSLAM2系统,对输入图像实施检测,基于检测结果初始化特征点的权重,并联合优化权重和估计位姿。为评估动态SLAM系统的性能,本文在TUM RGB-D数据集和真实场景下展开实验。定性和定量实验的结果表明,本文动态SLAM系统在动态场景下的定位精度相对ORB-SLAM2有显著提升,并且比当前先进的动态SLAM算法更加鲁棒。针对传统图像特征点在复杂场景下的不足,利用深度学习自动提取图像特征的优势,以学习的方式提取特征点和估计相机相对位姿。本文以自监督学习的特征提取网络Super Point为基础,用Soblel边缘检测滤波器得到梯度引导的特征检测器,然后将特征检测器和Deep F位姿估计网络连接到一起并端到端训练。为实现端到端训练,本文对特征检测器的输出实施局部软argmax(softargmax)操作,确保梯度向后传递到特征点。最后,在多个复杂场景的数据集上进行特征提取和相对位姿估计实验。Hpatches数据集下的特征提取实验表明学习特征点和传统特征点相比分布更均匀,且能获得更高的匹配分数。KITTI数据集下的相对位姿估计实验中,本文算法的估计位姿误差最小;Apollo Scape数据集下,本文位姿误差虽然比SIFT略大,但相对Super Point较小,验证了端到端训练方式对准确性和泛化能力的提升。
其他文献
氧气是钢铁制造长流程高炉炼铁、转炉炼钢等工序生产过程中非常重要的能源,对企业生产效率和效益有重要影响。特别是转炉的周期性生产方式,会造成氧气需求的较大波动,而制氧机的生产和供应系统需要稳定运行以保安全高效。因此论文围绕转炉生产的氧气需求预测,在分析炼铁和炼钢工序等用户氧气需求特点的基础上,从减少氧气需求波动、供需不匹配引起制氧成本增加等问题出发,进行氧气需求预测及氧气配置计划优化的仿真研究,所得结
随着交通领域对节能减排的迫切需求日益上升,燃料电池汽车(Fuel Cell Vehicle,FCV)以其续航里程长、单位能效高和几乎零排放的优势成为我国未来新能源汽车发展的重要方向。然而,当前使用的燃料电池大多功率密度较低,动态响应较慢且不可回收制动能量。为了弥补这些缺陷,本文引入蓄电池与超级电容作为辅助动力单元,构成多源混合动力系统(Hybrid Power System,HPS),共同为负载供
随着科技的进步与时代的发展,传统能源的储存量已经满足不了人类日益发展的需要,同时,使用传统能源所带来严重的环境问题(如酸雨、粉尘及温室效应等)也引起了人们的广泛关注。因此,开发高能量密度、低碳环保的清洁能源已经成为了当下研究的热点课题。直接甲醇燃料电池(DMFCs)作为一种便捷的移动电源设备,因具有能量密度高、环境友好、转换率高等优点成为了能源研究领域的研究热点。目前Pt基催化剂作为DMFCs常用
肌肉是人体运动系统的重要组成部分,在人类的日常生活和工作中发挥了十分重要的作用。肌音信号是一种记录和量化骨骼肌肌纤维的低频横向振动信号,它能反映肌肉收缩过程中的力学特性,相比肌电信号,它具有采集更加便捷、抗电磁干扰能力更强等检测优势,越来越受到临床和高校工作者的重视,并逐步应用到康复领域中。传统的运动康复治疗在运动损伤患者的恢复期可以通过肌力训练来增强肌肉力量,但缺乏一种客观评估肌肉活动水平的方法
机器人广泛应用于工业制造、航天、医疗领域。相对于传统的非冗余机器人,冗余机器人具有更好的灵活性,能够与人进行交互,在非结构化的环境中完成复杂的任务。为了充分地利用机器人的冗余度,需要对任务进行插入和移除,这会引起关节速度出现不连续现象。此外,冗余机器人的自运动特性使机器人会出现关节自运动不稳定现象。针对上述两个问题,本文建立了冗余机器人运动学模型,并分别在机器人运动学一阶运动学层次和二阶运动学层次
近年来,工业发展迅速,随之产生越来越多的各种工业废水,其排入水体造成水污染问题愈演愈烈。其中,染料废水是重要的水污染来源,排放到水体中的染料很难生物降解,往往会阻碍阳光和氧气的渗透,从而抑制水生系统的光合活性,造成严重的环境问题。此外,染料具有较强的致癌性、致畸性、诱变性和毒性,对人类和水生生物构成严重威胁。因此,染料废水的治理十分必要。与其他工艺相比,吸附法处理染料废水经济高效,操作简单,不产生
随着现代工业技术的飞速发展,系统的安全可靠运行是必然趋势。在大多数应用领域,故障通常是间歇的。间歇故障广泛存在于电子、机械设备和电力系统中,也经常出现在现代尖端科技领域。此外,间歇故障反复随机出现,导致很难快速、准确地诊断和分离。在间歇故障的研究成果中,大多针对特定对象的数据驱动方法都关注于系统是否发生间歇故障,无法检测其所有的出现时间和消失时间,而基于解析模型的方法可以有效解决这个问题。区间观测
近年来,随着5G通信、移动应用、物联网、卫星广播等新兴产业的飞速发展,电子设备也将逐渐趋于小型化、微型化甚至超微型化,使得对高介质、低损耗、温度系数小的微波材料需求越来越大,这为更小、性能更优越的微波介质的发展提供持续的动力。因此,对于微波材料的研究与检测已成为热点。由于微波材料的尺寸、形状、材料参数的不同,对微波材料的测量方法主要有传输线法、谐振法和微扰法。传输线法虽具有较宽的测试频率范围,但对
目前成功服役的星表探测机器人都是轮式移动系统,轮式机器人在平坦地形上表现出较好的移动性能,但难以适应崎岖不平的复杂地形。轮腿式机器人将腿式机器人和轮式机器人结合,同时兼备轮式机器人移动速度快的优势和腿式机器人灵活的仿生特性,逐渐成为星表探测机器人发展的一个重要方向。轮腿式机器人在复杂环境下具备优越的适应性,但是需要搭载更多的驱动单元,增加了机构复杂度和运动规划的难度,轮腿式机器人如何在复杂地形下实
能源是人类文明进步的基础和动力,攸关国计民生和国家安全,建筑领域的节能是国家“节能减排”工作的关键一环。区域供冷供热系统外网管线长,输配能耗高,节能潜力巨大。研究适合区域供冷供热系统输配外网的优化控制策略,在满足所有末端负荷要求的同时,最大限度地挖掘水泵的节能潜力,对节约能耗,改善管网运行性能意义重大。首先,本文提出了末端最佳运行温差和最不利热力末端的概念。依据换热器的数学原理,介绍了末端最佳运行