基于双目立体视觉与深度学习的三维重建研究

来源 :华中科技大学 | 被引量 : 0次 | 上传用户:lixinjun678
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
双目立体视觉是通过模拟人的眼睛对目标物体的感知来获取目标物体的三维深度信息。目前双目立体视觉技术在机器视觉领域发展已经成为最为关注的方向,在自动驾驶、无损探伤以及无人机飞行等领域已经得到了大量的应用。立体匹配是双目视觉技术的重要环节,传统的稠密立体匹配算法具有计算速度慢,视差精度低的特点,因此很难适用于实际场景,使用稀疏立体匹配的方法虽然计算速度快,但其计算精度差,容易受到噪声干扰。为了解决上述问题,本文将卷积神经网络模型CNN(Convolutional Neural Network,CNN)应用于立体匹配技术中,以实现对真实场景中目标物体的高精度和高效率的三维重建。本文首先对现有的相机标定技术进行了综合对比与分析,然后选取了具有高准确性的张氏标定法对图像中的特征点进行提取,并结合Matlab软件和Opencv4.0机器视觉开发库以获取双目相机的内参矩阵、畸变系数矩阵和平移旋转向量等参数,用于后续的立体匹配和三维重建等技术。针对传统立体匹配技术计算精度低和实时性差的问题,本文在初始匹配代价计算阶段设计了高效的轻量级卷积神经网络模型,通过堆叠多个卷积层提取不同尺度的特征图以实现更精准的初始匹配代价计算,并利用KITTI2012数据库中的标准图像序列对所设计的网络模型参数进行迭代优化,有效地改善了真实场景图像序列的视差估计精度。相比于所列举的对比算法,本文方法估计精度提升了28%,运行时间小于1秒。为进一步优化初始视差估计精度低的问题,本文通过利用基于十字交叉的半全局匹配算法进行代价聚合,并对遮挡问题引起的匹配点缺失问题,利用了左右一致性算法对聚合后的代价进行细化,以计算更精准的视差值。此外,针对真实场景中噪声等因素导致的误匹配问题,进一步对视差图进行平滑滤波操作,以改善图像边缘处的视差精度。相比于所列举的对比算法,本文方法估计精度提升了35%,运行时间达到秒级。最后,本文根据三角测量原理,利用所计算的高精度、强鲁棒性的视差图对真实场景中目标物体进行三维重建。本文利用KITTI和Middlebury等多个标准数据库对本文方法与其他较经典算法进行了综合实验对比与分析,实验结果表明将卷积神经网络模型引入到立体匹配计算技术中,能够有效地提高匹配算法的准确性,以满足双目立体视觉技术对真实场景中目标物体三维重建的实时性要求。
其他文献
材料隐身是在外形隐身的基础上进一步降低目标雷达散射截面(Radar Cross Section,RCS)的重要途径。频率选择表面(Frequency Selective Surface,FSS)作为一种新型隐身材料较传统材料在功能实现方式上更加多样化,在设计上具有更高的灵活性。目前关于频率选择表面的研究大多是平板反射率性能以及小角度30°范围内的单站RCS缩减。本文将结合频率选择表面阻抗层和金属反
在大数据时代,如何有效地对大数据处理的结果进行展示具有重要意义。目前针对大规模图数据处理的Web可视化系统需要消耗大量CPU资源完成计算和渲染,在展示大量图数据时受到浏览器性能的限制,导致效率较低。许多工具库通过不断优化算法,在布局性能上有了很大提升,然而渲染方面仍然效率不足。相比于CPU,图形处理器(Graphics Processing Unit,GPU)更适合处理大规模运算,但是在GPU上的
光纤陀螺仪是基于Sagnac效应的高精度角速度传感器,具有体积小、成本低、寿命长、功耗低、动态范围大等一系列优点,在航空、航天、陆地、航海等军用、民用领域都具有广泛的应用。然而,光纤陀螺关键元器件几乎都是从美国进口,国产率远远达不到95%的要求,设计具有自主知识产权的光纤陀螺专用芯片具有重要的意义。本文针对干涉式闭环光纤陀螺数字控制电路进行优化集成,设计光纤陀螺数字控制专用芯片,以满足光纤陀螺电路
受在线评论的评论质量参差不齐以及评论数量爆炸式增长的影响,消费者已经开始逐渐转变评论阅读的方式,从大范围阅读评论转变为只阅读顶端少数几条或十几条评论。在目前实际的评论领域中,对评论进行简单的分类排序,其粗略的排序结果已经不符合当今需求,而对评论进行简单的回归排序,其全局的排序结果又不够精确,也不满足目前消费者阅读评论的需求。针对现有评论排序研究在目前实际需求中存在的不足,通过将分类排序和回归排序进
相对于线极化天线,圆极化天线因其自身特点在遥控、遥测、雷达和卫星通信等领域得到了广泛的应用,特别是在Ku波段卫星通信中的应用。随着现代通信技术的飞速发展,对圆极化天线的带宽、增益等性能指标提出了更高的要求,基片集成腔(Substrate Integrated Cavity,SIC)天线具有尺寸小,高增益以及能有效抑制表面波等优点,已成为天线设计领域研究的热点之一。基于SIC结构,开展Ku波段宽带、
为了更好存储多元化的数据,存储系统中引入了局部修复码技术。局部修复码能够在保证可靠存储的同时,显著降低数据重构开销,因此适合应用于冷数据的存储。但是随着存储系统的不断发展,局部修复码的编码性能逐渐成为了限制存储系统发展的重要瓶颈。因此,充分利用存储节点所使用的廉价图形处理器(GPU)并设计实现一个能显著提高编码性能的局部修复码优化方案是当务之急。为了更好利用局部修复码提高存储系统性能,提出了一种基
工控系统涉及众多关键基础设施,一旦受到攻击将造成惨重的经济损失,然而工控网络相对比较封闭,内部没有足够的数据支撑,缺乏对于外部威胁的应对能力,并且传统的网络安全分析方法具有一定限制,只能预测已知攻击,无法预测未知攻击。为了提高工控网络安全分析能力,本文提出了一种数据驱动的工控网络安全分析框架,并围绕工控网络安全知识图谱的构建和应用开展研究。针对工控网络安全分析缺乏数据支撑的问题,本文将互联网中海量
文字,作为一种传播信息的载体,其往往包含了丰富的同时也是人们需要的重要信息。自然场景文本识别就是检测识别自然场景中的文本实例,包括车牌、路牌和广告牌等,所以自然场景文本识别在日常生活中有着广泛的应用前景。本文的研究内容就是如何准确提取医疗票据图像中文本信息,从而保证后续文本识别的准确性。因为人工录入效率低、成本高,并且录入人员会因疲劳而导致出错,而如果能够使用场景文本检测算法通过机器完成录入票据信
随着网络技术、数据通讯技术、人工智能等的不断发展,智能视频监控系统的应用在不断扩大。在网络通讯高速发展和计算机技术快速进步的情况下,基于监控摄像头下的人脸识别技术的智能视频监控系统能够减轻大型场所监管人员的工作压力并且提高工作效率,对加强安全和自动化管理有着重大的作用,拥有巨大的发展空间。另外,由于监控场景下的人脸识别技术需要面对运动模糊、光线不一,姿态各异等众多非约束场景的不定因素,这些问题值得
在压水堆冷管段小破口失水事故(SBLOCA)中,一回路蒸汽发生器与主冷却剂泵之间的U型管内会形成阻碍一回路循环流动的环路水封。一回路循环的中断会导致堆芯上腔室内蒸汽不断聚积,引起堆芯坍塌液位下降和燃料包壳峰值温度上升,直到发生环路水封清除(LSC)现象。因此,研究LSC现象发生的时间及影响因素对燃料包壳峰值温度的精确安全分析具有重要意义。本文利用最佳估算程序RELAP5/MOD3.4对压水堆小破口