结合LiDAR与RGB数据构建稠密深度图的多阶段指导网络

来源 :中国图象图形学报 | 被引量 : 0次 | 上传用户:a15968331849
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
目的 使用单幅RGB图像引导稀疏激光雷达(light detection and ranging,LiDAR)点云构建稠密深度图已逐渐成为研究热点,然而现有方法在构建场景深度信息时,目标边缘处的深度依然存在模糊的问题,影响3维重建与摄影测量的准确性.为此,本文提出一种基于多阶段指导网络的稠密深度图构建方法.方法 多阶段指导网络由指导信息引导路径和RGB信息引导路径构成.在指导信息引导路径上,通过ERF(efficient residual factorized)网络融合稀疏激光雷达点云和RGB数据提取前期指导信息,采用指导信息处理模块融合稀疏深度和前期指导信息,并将融合后的信息通过双线性插值的方式构建出表面法线,将多模态信息融合指导模块提取的中期指导信息和表面法线信息输入到ERF网络中,提取可用于引导稀疏深度稠密化的后期指导信息,以此构建该路径上的稠密深度图;在RGB信息引导路径上,通过前期指导信息引导融合稀疏深度与RGB信息,通过多模态信息融合指导模块获得该路径上的稠密深度图,采用精细化模块减少该稠密深度图中的误差信息.融合上述两条路径得到的结果,获得最终稠密深度图.结果 通过KITTI(Karlsruhe Institute of Technology and Toyota Technological Institute at Chicago)深度估计数据集训练多阶段指导网络,将测试数据结果提交到KITTI官方评估服务器,评估指标中,均方根误差值和反演深度的均方根误差分别为768.35和2.40,均低于对比方法,且本文方法在物体边缘和细节处的构建精度更高.结论 本文给出的多阶段指导网络可以更好地提高稠密深度图构建准确率,弥补激光雷达点云稀疏的缺陷,实验结果验证了本文方法的有效性.
其他文献
目的 物联网(internet of things,IoT)感知层获取数据时存在资源受限的约束,同时数据常常遭受泄露和非法篡改.数据一旦遭到破坏,将对接收者造成很大的影响,甚至可能会比没有收到数据更加严重.针对IoT数据获取面临的能耗和安全问题,提出一种基于半张量积压缩感知的可验证图像加密方法.方法 首先采用级联混沌系统生成测量矩阵和验证矩阵,测量矩阵以半张量积压缩感知的方式进行采样得到观测值矩阵.利用Arnold置乱观测值矩阵得到最终密文信号,与此同时由验证矩阵生成消息验证码一同在公共信道传输,将由级联
场景的深度估计问题是计算机视觉领域中的经典问题之一,也是3维重建和图像合成等应用中的一个重要环节.基于深度学习的单目深度估计技术高速发展,各种网络结构相继提出.本文对基于深度学习的单目深度估计技术最新进展进行了综述,回顾了基于监督学习和基于无监督学习方法的发展历程.重点关注单目深度估计的优化思路及其在深度学习网络结构中的表现,将监督学习方法分为多尺度特征融合的方法、结合条件随机场(conditional random field,CRF)的方法、基于序数关系的方法、结合多元图像信息的方法和其他方法等5类;
目的 针对多视图立体(multi-view stereo,MVS)重建效果整体性不理想的问题,本文对MVS 3D重建中的特征提取模块和代价体正则化模块进行研究,提出一种基于注意力机制的端到端深度学习架构.方法 首先从输入的源图像和参考图像中提取深度特征,在每一级特征提取模块中均加入注意力层,以捕获深度推理任务的远程依赖关系;然后通过可微分单应性变换构建参考视锥的特征量,并构建代价体;最后利用多层U-Net体系结构正则化代价体,并通过回归结合参考图像边缘信息生成最终的细化深度图.结果 在DTU(Techni
目的:利用分光光度计法测定某市部分超市、小作坊销售的面制品中铝含量,为食品安全监管部门提供科学依据.方法:参考《食品安全国家标准食品添加剂使用标准》(GB 2760—2014)方法,样品经消化处理后,以铬天青S为显色剂,在乙二胺-盐酸缓冲溶液中进行显色反应,结合紫外分光光度计准确测定铝的含量.结果:本法线性良好,线性范围0.086~0.658μg/mL,相关系数达0.9988,回收率为96.9%~109.8%,相对标准偏差为0.6885%、0.9099%.实际检测样品中,有8份样品检出铝含量超标,其含量在
采用气相色谱-串联质谱法测定豇豆中倍硫磷残留量,依据《测量不确定度评定与表示》(JJF 10591.1—2012)评价其测量不确定度.结果 表明,在95% 置信概率下,豇豆中倍硫磷残留量的测定结果可表示为(0.141±0.013)mg/kg,k=2;其中,测量重复性对倍硫磷不确定度的评定影响最高.
目的 文档水印技术是一种用以解决文档泄密溯源的信息隐藏技术.传统的基于字库的文档水印方案需要手动生成字库,极大地影响了水印的使用效率.为此本文设计了一种基于自动生成字库的鲁棒文档水印方案.方法 该方法由一个端到端的编码—解码器结构的自动字库生成网络、一个字符筛选嵌入端和一个神经网络提取端组成,可自动完成变形字库的生成,而后进行水印的嵌入和提取.为了抵抗传输过程中可能存在的失真,在编码器和解码器之间加入可导噪声层用以模拟失真过程,使得水印模型获得对应的鲁棒性.结果 本文方法在含252个中文字符的真实文档中嵌
目的 显微光学成像有景深小和易模糊等缺陷,很难根据几何光学中的点扩散函数准确评估图像的模糊程度,进而很难计算景物深度.同时,传统的使用边缘检测算子衡量图像模糊程度变化的方法缺少与景物深度之间的函数关系,影响深度计算的精度.为此,本文提出一种显微光学系统成像模糊程度与景物深度关系曲线的获取方法.方法 从显微光学系统中的光学传递特性出发,建立光学传递函数中的光程差、高频能量参数和景物深度之间的数学关系,并通过归一化和曲线拟合得到显微光学系统的成像模糊程度与景物深度之间的解析函数.结果 为了验证本文获取的图像模
为评价崔家集西红柿的风味及营养价值,对崔家集西红柿和普通红色樱桃番茄的主要营养成分进行了对比,分析了2个品种樱桃番茄的含水量、可溶性固形物含量、可溶性糖含量、总酸含量、糖酸比、维生素C含量和口感评价.结果 表明,崔家集西红柿中含有丰富的营养成分,且各种营养成分都比普通樱桃番茄高.该研究为大面积种植崔家集西红柿提供科学依据.
在旅游养老活动进行中,老年人们会遇到各种不符合标准的食品.一旦出现食品安全问题,会引发十分严重的后果.因此,旅游养老活动中食品安全方面的监管与治理工作十分重要,相关工作人员必须要对引发食品安全的根本原因有明确的了解与掌握,并且要针对食品安全问题作出一系列有效防范措施,以此避免食品安全问题的出现.
建立了高效液相色谱-示差折光检测法(High Performance Liquid Chromatography Differential Refractive Detector,HPLC-RID)测定蜂蜜中果糖、葡萄糖、蔗糖、麦芽糖及乳糖5种还原糖含量的分析方法.蜂蜜试样用水提取,摇匀过滤后,经Kromasil 100-5-NH2色谱柱分离,用示差折光检测器测定.结果 表明,果糖、葡萄糖、蔗糖、麦芽糖及乳糖在1.0~10.0 mg/mL线性关系良好,5种还原糖的方法检出限均为0.5 g/100 g,加标