面向增强现实的目标位姿估计技术研究

来源 :东北大学 | 被引量 : 0次 | 上传用户:jj2653026
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
增强现实技术是在虚拟现实基础上发展起来的一项处于计算机视觉、图形学、模式识别与图像处理等多学科交叉领域的新兴技术,其目的在于将计算机生成的虚拟物体准确地叠加到真实场景中并实现虚拟场景与真实场景间的无缝融合。增强现实效果的真实感在很大程度上取决于虚实场景配准的精度,而虚实配准的模型参数主要来源于位姿估计技术。基于单目视觉的目标位姿估计方法以其成本低、易操作、应用场景广泛等优点,已经成为了学术界研究的热点。本文依托于增强现实的应用背景进行了基于单目视觉的目标位姿估计技术研究,研究内容根据标记物的属性分为两个方向:基于人工标记物的目标位姿估计技术和基于自然标记物的目标位姿估计技术。本文分别从两个方向入手,对面向增强现实的位姿估计算法进行了深入研究,具体内容如下:针对ARToolKit增强现实开发工具包中标记物对光照和遮挡敏感的问题,本文提出了基于LSD算法的标记物检测算法,LSD算法基于像素点的梯度信息检测图像中的线段,在此基础上本文提出了一整套算法流程确定了标记物的区域,从而对标记物关键点进行亚像素级别定位;同时本文对ARToolKit中原有的标记物识别算法进行了改进;通过实验证明了本文提出的检测识别算法能够解决ARToolKit中标记物存在的遮挡与光照敏感性问题,提高了系统的鲁棒性。针对ARToolKit中标记物位姿估计算法求解出的位姿数据不确定性较大且遮挡面积过大时使用本文提出的标记物检测算法仍然检测失败的问题,本文提出了基于置信度的多标记物位姿估计算法,根据每个标记物的置信度大小将多个标记物所得的数据进行加权融合,解决了原有算法存在的问题,经过实验对比分析,证明了该算法的可行性和有效性。在基于自然标记物的目标位姿估计方向,本文主要研究基于自然人脸的头部位姿估计;传统方法需要对人脸提取特征且特征的选取和提取质量的好坏对位姿数据影响较大;针对这些问题,本文提出通过训练深度网络来进行位姿估计,使用迁移学习的方法基于VGG16预训练模型对本文搭建的深度网络进行训练;训练好的网络能够通过人脸图像估计出头部的位姿数据,且精度比传统方法更高,达到了预期的效果。本文在基于人工标记物和基于自然标记物两类增强现实应用场景下将本文提出的算法与原有算法进行了对比,精度更高,数据稳定性更好,为增强现实应用的虚实配准提供了高质量的数据,使得增强现实效果更加逼真。
其他文献
供应链管理者要面对顾客需求的不确定性,当遇到由于外部或内部各种原因而引起的较大的需求波动时,如何保持一定量的安全库存和灵活并及时的补货策略,是降低系统运行成本的重要条件。本文研究的是一个供货能力有限的供应商向多个不同的下级门店供货的物流系统模型,供应链管理者采用周期性观察策略对多周期的补货进行决策;同级门店之间可以通过横向库存转运进行紧急补货,以备件横向的库存转运来调整各同级门店间的库存与需求的不
目前,家庭服务机器人是世界范围内机器人领域的热点研究问题,展现出广泛的应用前景。目标检测与跟踪是家庭服务机器人的重要组成部分,涵盖了图像处理、人工智能、传感器等多个学科的理论知识,在智能监控、视觉导航、人机交互、家庭服务等领域有着非常广泛的应用。在家庭室内环境下,任务目标呈现出多样化、复杂化、未知化的趋势,在复杂环境下对目标物体进行稳定的检测与跟踪面临着很多问题。本文基于家庭服务机器人,对目标检测
系统可靠性是可靠性理论中的重要组成部分,通过研究单元与整体之间、单元与单元之间的构造关系来获得整体可靠度。如何更加精确高效地对复杂系统可靠性进行分析和优化是可靠性领域亟待解决的重要课题之一。本文讨论了一种新的系统可靠性分析工具survival signature,并通过该方法进行了可靠性分析、模拟和优化等方面的研究。具体工作内容如下:利用survival signature对实际系统进行了可靠度分
我国社会经济迅速发展带动了汽车产业的发展,随着SUV乘用车使用量的增加,驾驶室振动大,异响严重的问题也随之突显。汽车的噪声振动不仅会影响车身的强度和疲劳寿命,也会使驾驶员注意力不集中,乘客不舒适等等。本文以某SUV车身为研究对象,通过有限元法搭建以壳单元为主体的车身有限元模型,对车身的结构特性和车内NVH特性进行分析,通过对车身结构的改进和板件厚度的调整,成功的改善了汽车的乘坐舒适性。本文的主要内
电弧离子镀膜技术是一种将真空弧光放电用于蒸发源的真空镀膜技术,具有离子能量高、沉积速率快、膜-基结合力高、膜层致密、离化率高等优点,广泛地应用于硬质薄膜、装饰薄膜、金属薄膜和光电薄膜(多系金属氧化物)等多个领域。然而,大颗粒污染问题、靶材利用率低的问题始终限制着电弧离子镀技术的发展。阴极电弧源作为电弧离子镀技术的核心部件,是电弧离子镀膜系统的关键。本文从阴极电弧源的电弧放电机理出发,采用“模拟+实
在日常生产生活中,疾病或意外事故时常会造成人手丧失部分运动功能;另一方面,人口老龄化等问题日益严重,也会对人手正常运动功能产生一定的影响。手部运动功能障碍与老龄化问题会直接导致人手运动力量不足,严重影响日常生活质量。随着机器人技术的不断发展,其在医疗方面发挥了重要作用,尤其是手部外骨骼为人手运动功能康复提供了便捷的途径。但现有的手部外骨骼装置主要针对人手康复训练,在助力和手部功能强化方面应用较少。
液晶离聚物是一类带有阴阳离子的超分子液晶,兼有液晶高分子特殊的光学性能和离聚物的增容性等,而且扩大了原液晶聚合物的应用范围,通过多种不同的搭配合成出具有不同结构和组成的各种新型的功能高分子材料,具有重要的学术价值,在化学、材料学、电子学、物理学等多学科中得到应用,而且在共混材料、光学、信息、膜材料等领域具有很好的应用前景。磺酸基是强极性基团,当液晶聚合物中有少量磺酸基时,就可以表现出极性,这类带有
碳化硅颗粒增强铝基复合材料(SiCp/Al)作为铝合金和碳化硅两种材料的集合体,相比于传统金属,具有比强度较高、比模量较大、耐磨性较高、有着较小的热膨胀系数以及尺寸稳定等一系列优点,已经是铁合金等多种合金的优先替代材料。目前,复合材料已广泛应用于航空航天等较多的高新领域中,且在大部分应用中都对材料有很高的表面质量要求,传统金属与硬脆材料的磨削理论已不足以解释复合材料的磨削机理,因此,需要不断深入探
随着我国航空航天、船舶、汽车、兵器、医学、建筑等行业的快速发展,钛合金因其具有优良的性能,使得其在这些领域中得到了高度重视和广泛应用。TC4是航空航天工业中广泛应用的难加工材料之一,研究应用于钛合金高速铣削加工技术,研究如何提高切削加工效率和加工表面质量具有重要理论意义和实际应用价值。本文以钛合金TC4材料为研究对象,采用理论、仿真和实验相结合的方法,重点研究钛合金高速铣削加工时铣削加工理论模型的
虹膜检测是虹膜识别技术的基础和关键。虽然目前存在许多不错的虹膜检测方法,但在非受限场景下,方法的稳定性仍易受到复杂背景、遮挡、不均匀光照等因素的影响。本文重点研究非受限场景下的近红外虹膜检测问题,并分别提出了基于LRND和DTS的虹膜检测算法以及基于Refined Mask RCNN的虹膜检测算法,具体如下:基于LRND和DTS的虹膜检测算法主要解决虹膜的区域级检测问题。首先,本文提出新型特征,即