基于VR设备的鱼眼双目立体视觉算法研究

来源 :重庆大学 | 被引量 : 0次 | 上传用户:wuyoucao654321
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着VR技术的日益成熟,越来越多的实验室开始引入VR设备,将教学项目虚拟化进程推向了一个新的高潮。然而在多人VR实验环境下,由于带上VR设备后与外界环境完全脱离,如何避免实验人员之间的碰撞成为了一个难题。如果所有实验人员都佩戴了VR设备,可以通过设备的定位来防止碰撞,但是现实情况往往复杂多变,需要一种准确、实时、视场范围广的解决方案。双目立体视觉技术根据一组二维图像获取场景的三维信息,该技术具有精度合适、非接触式、成本低等优点,在各领域得到了广泛应用。基于鱼眼镜头的双目立体视觉技术,其优势在于可以实时获取大视场图像信息。近年来,随着深度学习技术的发展,立体视觉领域出现了一系列基于深度学习的算法,并在各数据集上取得了领先的成果。本文以基于VR设备的鱼眼双目立体视觉算法为研究对象,主要工作有:(1)鱼眼图像进行校正后,周边区域由于插值算法等因素会出现物体轮廓模糊、特征信息缺失的现象,导致立体匹配结果出现噪声,精度下降。传统方法将周边区域完全舍弃,但这与鱼眼相机获取大视场图像的设计初衷相违背。通过分析立体匹配算法原理与图像周边区域成像特点,本文提出一种结合边缘检测算子的特征信息增强预处理算法。针对鱼眼图像校正后的周边区域,通过实验对比了各边缘检测算子的提升效果。实验数据表明,结合Sobel算子,该算法可以提高GA-Net在鱼眼图像校正后的周边区域的准确率。(2)在弱纹理区域中,由于特征信息缺失或存在多个相似候选区域,导致立体匹配算法难以确定唯一的对应点。而VR教学实验场景中存在大面积的空白墙壁,符合弱纹理区域的特征。在这些区域,立体匹配算法出现大面积的噪声,精度下降。通过分析具体实验场景模型和立体匹配算法原理,结合鱼眼相机大视场的优势,本文提出一种基于图像分割算法的分区域后处理算法。实验数据表明,针对存在大面积弱纹理区域的图像,该算法可以有效地减少噪声,提高GA-Net的准确率。(3)结合上述两种算法,设计了一套基于VR设备的鱼眼双目立体视觉防碰撞原型系统,在HTC公司的Vive Pro VR设备上完成了部署,并通过实验论证了该系统的可行性。
其他文献
下肢康复机器人是一种辅助下肢运动障碍患者开展康复训练的自动化医疗设备。在老龄化社会中,它是解决医疗资源不足、人工训练效果差、患肢康复率低等问题的关键资源。目前,市场上的下肢康复机器人多以精密电机驱动为主,存在着刚性冲击大、柔顺性不足、康复体验差等局限性。而气动肌腱驱动的下肢康复机器人(简称气动肌腱式下肢康复机器人)则具有柔顺性好、安全性高、运动平滑、稳定性高、清洁环保等特点。但是,当前市场上缺乏这
近年来,各种球类自动化捡拾产品逐渐成熟并投入使用,为用户带来便利的同时还提升了训练效果。然而,市场现有的羽毛球捡拾装置自动化程度较低,且在捡球过程中会对羽毛球造成损伤。因此,设计一款全自动且无损伤捡拾羽毛球的机器人具有一定的市场价值和社会意义。论文针对羽毛球难以无损捡拾的问题,提出了一种无损捡球方法,结合多传感器数据融合技术,基于SoC研制了一款全自动羽毛球捡拾机器人。系统感知部分主要工作有:设计
我国房地产市场的萌芽开始于1980年,国家出台了住宅商品化的一系列相关措施,撤销了福利分房制度并对土地使用制度进行改革,住宅需求的释放刺激一大批房地产开发企业的崛起。由于房地产业和上下游产业关系紧密,发展迅猛,逐渐成为我国经济的支柱,因此房地产业的健康对国家经济发展尤为重要。但是近几年来,商品住宅价格持续高涨,对经济和社会带来许多负面影响:打乱市场秩序,挤占中低收入家庭的正常消费拉低生活水平,炒作
随着信息化的发展,信息安全已经成为全社会最热门的话题之一,如何保障信息安全成为当前社会关注的要点之一。身份认证是对通信双方进行真实身份鉴别的技术,在信息安全方面尤为重要。目前广泛应用的经典认证方案通常是基于数学难题设计的;随着人们计算能力的提高,特别是量子计算理论和实验的发展,经典的认证方案受到了很大的威胁。鉴于量子密码协议可以实现信息理论安全性且这种安全性不受攻击者计算能力的限制,人们开始利用量
股票市场在短短的三十多年的时间已经发展成为我国市场经济中重要的一部分。越来越多的投资者关注着股票市场,如何对股价涨跌和股票价格进行精准的预测,已成为各个投资者最为关心的话题。财务指标作为上市公司每个季度都要披露的报表内容之一,在企业资产评估、企业信用评价等方面都有着非常重要的地位,往往被外界用来评判公司财务状况的一个重要指标,也常常被用来分析上市公司的股价。利用人工智能、数据挖掘技术寻找出财务指标
湿法冶金过程是应用液体溶剂将矿石中的金属通过浸出、固液分离和置换等步骤提取出来的过程。浓密机是湿法冶金过程中进行固液分离作用的主要设备,使用浓密机实现固液分离的过程称之为“浓密洗涤”。在实际生产过程中,浓密机运行的环境恶劣,影响因素众多,经常出现运行不稳定的情况,易引发“压耙”和“跑浑”等故障。故障一旦发生,不仅会使生产停滞,浪费原料,造成巨大的经济财产损失,甚至可能威胁到现场工作人员的生命。而故
随着科学技术的发展,室内机器人越来越多的出现在人们的生活中。相对于机器人室外工作环境复杂多变,室内机器人在工作过程中更多的会遇到玻璃检测、低矮物体检测等需求。在室内环境下,单线激光雷达移动机器人在工作过程中会遇到以下问题:首先由于激光雷达所采集的原始数据受传感器本身或者环境因素的影响将不可避免的出现噪点,因此需要一种滤波算法为机器人提供优质的传感器数据源;其次由于激光雷达通过光学原理测距,因此当激
大量商用核蒸汽供应系统(NSSS)及压水堆核动力装置均采用U型管式蒸汽发生器(UTSG)。UTSG的一次侧包含了多根并联的U型管。国内外许多研究发现,在入口流量较低的自然循环或强迫循环低流量工况下,部分U型管会发生倒流现象。当U型管发生倒流时,传热管总体的流动阻力增大,换热能力减弱,对蒸汽发生器和反应堆系统的正常运行造成不可忽视的影响。因此,对U型管式蒸汽发生器的倒流特性开展研究有着非常重要的意义
重大基础设施建设作为一种社会性的大规模活动,将深刻影响项目辐射区域的社会发展,对于改善生态环境、促进经济发展、提高生活质量等具有重要的推进作用。近年来为实现我国经济社会的跨越式发展,重大基础设施项目建设速度不断加快,但此类项目通常具有投资数额大、建设时间长、不确定性高、管理制度不完善等特点,在带来巨大的经济、社会效益的同时也带来了不少问题,如公众参与流于形式、征地补偿不到位、破坏文化习俗、改变社会
颗粒在日常生活中随处可见,而料罐在处理日常生活和工业生产中的粒状物料方面有着广泛而重要的应用,因此充分了解料罐内的颗粒流动形态及偏析机理对控制和优化出料过程具有重要意义。因此,本论文从基础研究与工业探索两方面对颗粒流动形态解析及偏析现象预测开展了研究工作。首先,采用实验和数值模拟的方法,从颗粒尺度动力学和结构两方面研究了颗粒在楔形料罐中不同初始堆积方式对瞬态颗粒流动的影响。结果表明,对于单粒径颗粒