单目图像的深度估计及在森林场景三维重建中的应用

来源 :北京林业大学 | 被引量 : 0次 | 上传用户:duancj1972
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
森林资源信息的采集是森林资源清查、林业三维可视化、智能林业机器人感知作业环境和识别作业目标的基础,也是一项复杂,繁重的任务。通过视觉传感器对森林场景进行三维重建,在此基础上进行森林资源信息采集和智能机器人导航、定位和作业目标识别是最具前景的方法,而森林场景的三维重建是关键和基础。因此,本文以单目视觉为线索对图像的深度进行预测,并应用到森林场景的三维重建中,从而进一步提升林业机器人的视觉信息处理能力。本文针对智能林业机器人获取图像方式的不同,从三个角度来实现单目图像的深度估计,进而恢复森林场景的三维信息。本文研究的具体工作可归纳如下:1.当训练集仅包含RGB图像和对应的深度图像时,提出了一种带有密集连接型神经网络的编码-解码结构模型,直接从单幅RGB图像中恢复深度信息,而无需任何深度传感器的介入。编码器主要通过一系列的卷积操作从原始数据中提取最具代表性的特征,并降低空间输入特征的分辨率。解码器部分主要由一些上采样结构组成,逐步提高特征图的分辨率。本文的深度预测模型是从零开始训练,没有任何特殊的微调过程,并使用了新的优化函数来自适应调整学习率。实验结果表明,在NYU Depth V2数据集中的绝对相对误差(Abs Rel)与最优的方法相比降低了7.69%,均方误差(RMSE)降低了8.81%;在Make3D数据集中的Abs Rel值与最优的方法相比降低了7.55%,RMSE值降低了6.26%。2.当训练集仅包含校准后的左-右图像时,依据双目视觉理论和对极几何原理提出了一种基于通道注意力机制的新型卷积神经网络结构,该结构基于一些通道注意力模块来设计神经网络,将深度预测看作视差图的回归问题。并使用校准后的立体图像对来训练深度估计模型。该方法在训练过程中无需任何深度数据作为监督信号。本文还探索了一种新的上采样策略以提高输出特征图的分辨率,并引入了一种新的动态优化策略以提高模型的训练速度和预测精度。在KITTI官方划分的数据集上本文的方法在8个评价指标上取得了最优的结果;在Eigen划分的数据集上本文在5个指标上取得了最优的结果,在2个指标上取得了次优的结果;在Cityscapes数据集上本文在8个指标上取得了最优的结果。3.当训练集仅包含单目的视频序列时,依据运动结构恢复的基本原理设计了一种基于单目图像深度估计的无监督学习框架,并且仅使用相邻视频帧作为监督信号,以无监督学习方式来训练神经网络。本文的方法还预测了两个置信掩码以解决遮挡所造成的误差。最后我们利用最大尺度和最小深度损失代替多尺度和平均损失来提高模型的估计精度。实验结果表明,在KITTI数据集上的平方相对误差(Sq Rel)与最优的方法相比降低了4.86%。4.开发了基于单目图像的森林场景三维重建系统并对活立木的胸径进行测量。在三种不同季节的森林环境中,通过加载本文第四章提出的无监督深度估计模型对森林场景进行三维重建,实现活立木的胸径测量。试验结果表明本文模型的平均误差为2.72cm,具有一定的适用性。
其他文献
蒺藜苜蓿(Medicago truncatula)是一种豆科模式植物,基因组小,遗传信息简单,广泛用于分子生物学基础研究,研究数据具有代表性,为其它豆科植物的品种改良提供遗传依据。Dof(DNA binding with one finger)家族转录因子是植物所特有的一类锌指蛋白,蛋白结构中包含一个特有的Dof保守结构域,通常由DNA结合域和转录调控域组成,其中转录调控结构域的氨基酸序列较为多变
学位
学位
学位
铅(Pb)是土壤环境中含量最多的重金属之一,其对植物生长发育的各方面均可产生毒害作用,并且可以通过食物链最终在人体富集,严重危害农林业生产及人类健康。杨树等多年生木本植物生物量大,根系发达,与食物链关联较小,更适合应用于生物修复,改良土壤环境。目前在对植物重金属耐受机制的解析中,虽然已经鉴定了许多重金属吸收和转运相关的基因,但重金属耐受性是一个复杂的数量性状,单一基因不足以解释其内在的调控机制。近
学位
目前以真空冷冻干燥技术制干的枸杞干果成为一种新的产品形态。然而,冻干枸杞在常温贮藏过程中会出现退色变白现象,严重影响产品的营养与感官品质。本论文旨在通过冻融提高枸杞干燥效率与色泽稳定性,首先研究了冻融处理对枸杞真空冷冻干燥特性与色泽的影响;从类胡萝卜素和其他抗氧化组分的变化深入分析冻融处理对冻干枸杞色泽和功能品质的保护作用;在此基础上,通过化学和光谱学深入分析揭示了冻融处理提高冻干枸杞色泽稳定性的
学位
为适应全面抗战的需要,发挥文艺的宣传力量,1938年8月,国民政府政治部第三厅在救亡演剧队和各地爱国民间剧团的基础上,组织建成了10支抗敌演剧队和4支抗敌宣传队。获得合法身份后,8月下旬,各个演剧队先后从武汉开赴各大战区工作,通过巡回演出、访问劳军等方式,将抗战的火种带到了全国各地。抗敌演剧队延续了救亡演剧队时期业务民主、生活民主、经济民主的工作作风,在艰苦的物质生活条件和残酷政治迫害的夹击下,维
学位