【摘 要】
:
双目立体匹配是模拟人类视觉获取深度的技术,广泛应用于路径规划、光学测量和即时定位与地图构建等领域。相比于传统方法,基于深度学习的双目立体匹配技术具有特征鲁棒性好、视差结果稠密等特点,但面临高反光物体引起的过曝现象时,仍存在误匹配问题。同时,相关数据集的缺乏限制了过曝场景下相关技术的研究。镜面反射引起的过曝现象会导致双目图像的匹配特征消失,引起误匹配导致视差估计精度降低。因此,本文从修复过曝区域丢失
论文部分内容阅读
双目立体匹配是模拟人类视觉获取深度的技术,广泛应用于路径规划、光学测量和即时定位与地图构建等领域。相比于传统方法,基于深度学习的双目立体匹配技术具有特征鲁棒性好、视差结果稠密等特点,但面临高反光物体引起的过曝现象时,仍存在误匹配问题。同时,相关数据集的缺乏限制了过曝场景下相关技术的研究。镜面反射引起的过曝现象会导致双目图像的匹配特征消失,引起误匹配导致视差估计精度降低。因此,本文从修复过曝区域丢失特征的角度出发,基于深度学习技术,结合数据渲染和图像修复理论,对过曝场景下的双目立体匹配技术开展研究,具体研究内容如下:针对过曝场景视差标注困难和公开数据集缺乏过曝场景的问题,构建了过曝场景数据集。研究了一种基于三维软件Blender标注过曝场景视差的方法,建立了双目相机深度视差转换的模型,构建了过曝场景下视差数据900例。最后通过图像重构验证了数据标注的正确性,为过曝场景双目立体匹配的精度评估和模型预训练提供了数据支持。针对过曝现象导致匹配特征消失引起的误匹配问题,提出了利用双目信息冗余性修复丢失特征的思路,构建了一种基于权重和特征共享的多特征提取模型。该模型基于视差注意机制和图像修复模块,从来自模型不同深度和路径的多个语义特征中提取冗余信息,重构双目特征,解决了卷积神经网络获取中长距离匹配关系困难的问题,实现了多特征融合,改善了过曝区域的视差预测精度。针对过曝场景整体预测精度较低的问题,一方面提出了一种基于特征相关性构建匹配代价空间的方法,提高了模型度量特征匹配度的能力;另一方面建立了视差估计和图像修复的多任务模型,从网络结构和目标函数两个方面联合优化网络。最终实现了过曝场景整体视差预测精度的提高。实验结果表明,本文提出的模型同PSMNet、GANet、AANet等近年主流深度学习模型相比,可将过曝场景下视差估计平均像素误差由10.17(±0.65)像素降低至5.83像素,精度提升约40%。本文研究成果已应用于“高铁列车双目视差估计项目”的生产环境中,同现有方法相比,本文提出的模型可显著改善列车高反光部件的视差预测精度,为后续故障检测,定位与分析提供了准确的三维信息。
其他文献
众所周知,深度学习技术在诸多领域的判别任务上已经取得了飞跃式进展。近五年来,生成对抗网络的提出把图像生成任务也推向了新高度,其中也包括本文的研究主题,文本到图像生成。文本到图像生成是一种条件图像生成任务,它以自然语言书写的文本描述为条件信息,指导或监督生成对抗网络生成符合文本高层语义的高质量图像。生成对抗网络作为目前最受欢迎的生成模型,成为了文本生成图像的主要解决方案。但是,由于生成对抗网络训练困
数据可视化可以将数据展现为不同的图像或模型,满足不同使用者的阅读理解习惯,减少用户对复杂或大规模数据的处理时间,更充分的挖掘信息数据,更快的进入到直观分析阶段,有效实现用户角色从信息化系统办事员到专业事项分析员的转变,同时提供科学管理的支撑保障。常见运用于资本变化、基金可持续情况、劳动力流动分布、政策效果反馈、群众行为数据等的统计。目前社会保险业务经办系统尚处于简单管理阶段,在大数据应用方面还相当
现今社会,“养生”一词频繁登上各类搜索引擎的热搜榜,足以说明当代人对于身体健康的关注程度空前高涨,而其中最不容忽视的就是口腔问题。无论是口腔疾病还是爱美人士想要对口腔进行美化,都离不开对口腔内牙齿的研究。为了减轻医生的负担,目前对于牙齿分割的研究正成为各学者的研究重点和热点。此时诞生的CBCT成像技术受到广大关注,并为辅助口腔颌面诊治提供重要的数据支撑。目前对CBCT牙齿图像分割的方法有多种,但由
随着社会发展越来越快,政府自身和人民群众对政府要求越来越高。原有的公文检索和管理方法已无法支撑现有工作开展,必须采用基于全文检索系统的政府公文管理系统,目前全文检索系统的关键技术是中文分词,本文采用基于统计模型(条件随机场)的自动分词方法,相较于基于词表或者依赖词表的分词方法具备人力成本低、总体效率高的特点。条件随机场(Condition Random Fields,CRF)模型的中文分词应用到政
随着科学技术和社会的飞速发展,信息在人们的日常生活和工作中所占的地位日益提升,人与人之间的信息交流日益频繁。目前所采用的传统通讯方式如电话、传真、邮件、信件等都已经无法满足人们“面对面”沟通的需求。且多种通讯手段互不兼容,无法在日常工作中实现有效的融合,现有视频通讯手段又无法满足电网企业网络安全要求。信息安全、及时、有效的传达是电网企业当前面临的首要问题,也是电网企业现代化建设的重要标志。本文以企
我国配网中性点接地方式主要有中性点经消弧线圈接地和不接地方式。在小电流接地系统中,故障率较高的故障类型是配网线路单相接地。本文根据笔者所在单位的实际情况,通过互联网搜集相关文献资料,了解关于配网中性点不接地系统电容电流数据管理目前的研究和应用现状,依据实际配网运行管理业务进行需求分析,确定本文的研究内容及软件实现方式,研究工作的相关内容如下:(1)根据当前配电系统中性点的典型运行方式和实际运行情况
为了提升深度学习模型在新数据集上的泛化性时减少对标签的依赖。我们设计了一种从粗到细的特征对齐方法用于提升不同数据集之间的数据分布一致性,其结合熵最小化算法,在不利用目标域标签训练的情况下,就可以更好地泛化到其他数据集。笔者首先分别验证我们设计的全局特征对齐和类别特征对齐算法的有效性,随后将两种特征对齐算法结合,形成本文最后的粗到细特征对齐算法。主要工作如下:1.验证熵最小化领域自适应模型。出于熵最
随着国家军工行业的不断深入发展,信息化手段已全面运用于产业链的方方面面。某飞机生产企业随着飞机产量的提升,机载数据的容积剧增,供应链复杂度的增加,军工行业试飞领域的大数据时代已经来临。本文的主要工作是来源于军工企业试飞领域大量试飞数据的产生、分析、各种基础管理交织并行,从而提出建设一套试飞管理和数据平台,科学高效安全的存储、管理和处理大量试飞飞行数据,并集成基础数据管理、工装工具管理等功能,全面提
随着我国航空业的迅速发展,用户现场的飞机服务保障信息化成为制约其发展的瓶颈。用户现场的服务保障工作管理不规范、飞机服务保障过程缺乏有效监控,并且用户现场产生的飞机状态信息缺乏可视化平台,无法实时同步各部门的信息,因此备件资源及用户问题处置等资源难以被有效利用,可见传统的工作模式已无法适应用户现场的飞机服务保障的要求。为解决上述问题,本文设计一种用户现场的飞机服务保障管理系统,并将数据可视化平台植入
全球家电企业市场竞争日益激烈,产品迭代更新快,在新产品的制造、设计过程中大量的工程技术图纸需要被设计、修改、参阅,形成了丰富的图纸资源库。顺德作为家电重镇,有许多小家电企业都面临着内部产品图纸管理与保密。各企业间的基本现状是大量产品、模具、专用设备、工装夹具的CAD图纸掌握在各个职能部门及少量人员手中,缺乏有组织、规范的集中管理。在行业中研发设计人员流动相对频繁,这就容易造成大量的图纸丢失、泄密,