基于深度相机的室内全场景三维重建技术研究与实现

来源 :电子科技大学 | 被引量 : 0次 | 上传用户:damson800413
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
在计算机视觉技术领域里,三维重建是一个备受关注的话题。从最初的运动恢复结构、多视角立体几何等离线重建技术,经久不衰的同步定位与地图构建技术,再到如今以Kinect Fusion为代表的借助图形处理器加速计算的实时稠密表面重建方法,三维重建都在朝着更快、更精细和开销更低的方向演变。此外,近年来消费级深度传感器在三维重建系统中通常扮演扫描仪的角色。本文研究的重点是基于深度相机的室内实时稠密大尺度建模,将Kinect Fusion重建管线作为基础,对其中各个模块做出相应的算法改进,目的是为使整套三维重建系统具有更好的鲁棒性、更高的精度和更低的计算开销。本文将整体算法框架分为预处理、表面更新、表面渲染和位姿估计四个模块,并主要在以下方面作出了研究:1、面向稠密三维重建系统,更新了扫描工具。首先在研究Intel公司最新的RealSense系列相机的基础上,将其作为整个系统的输入设备,回避了Kinect系列深度相机体型过大且不便携等劣势。接着,对实时稠密大尺度重建的关键技术进行研究,分析了各自的优缺点后综合选择出本系统采用的技术。2、改进了TSDF模型的使用方式。首先将体素哈希技术用于三维数据的实时管理,向表面更新模块中加入了体素哈希算法。由于KinectFusion难于大尺度重建的瓶颈在于显存的限制,针对这一问题,我们设计出一个主存与显存的体素块交换框架和相应的交换规则,来使本文构建的系统更适用于大尺度的室内场景建模。此外,在渲染阶段提出了空间跳跃的寻找表面方式,来实现接近三倍的渲染加速。3、改进了相机跟踪流程。首先,将深度数据进行双边滤波处理以用作跟踪流程的输入端。其次,研究了点-面度量的迭代最近点跟踪算法,并在此基础上改进了一种跟踪精度评估方法。最后,引用并改进了局部子地图,为全局一致地图提供了基础。与KinectFusion的单个全局地图不同,本文将全局地图划分为局部子地图使得其可被打乱来减少闭环检测的错误,在场景增大时可保持活跃子地图数恒定。4、应用上述技术,构建了基于便携三维扫描仪的室内全场景三维重建的系统框架,进行了数据集仿真和实际场景的重建实验,并对结果进行了定性和定量的讨论分析。此外,本文还面向视觉供灰应用进行了扩展实验,将重建结果作为该应用的输入数据。移植实验表明,重建模型在视觉供灰应用中的计算误差低于10%,因此本文提出的方法具有较高的实践应用价值。
其他文献
信号波达方向(Direction-of-Arrival,DOA)估计问题在声纳阵列测向、移动通信等领域具有广泛的重要应用背景,也是阵列信号处理中信号参数估计的重要问题之一。在DOA估计中,信源数的估计有着至关重要的影响,信源数已知是许多DOA估计算法必不可少的前提条件,当信源的估计个数不等于实际的信源数时,DOA估计算法的性能急剧恶化甚至失效。因此,是否准确估计信源个数对DOA估计算法在各领域中的
当今网络通信环境下,接入网络的各种智能设备和移动用户数量急剧增长,频谱资源稀缺的问题也愈加突出。相比传统的正交多址接入(OMA),非正交多址接入(NOMA)技术具有系统容量高,传输时延低,可接入用户多的优势,可以更好地满足无线网络的传输需求。NOMA可以将一个信道的资源以非正交的方式提供给若干用户使用。本文重点关注NOMA系统的用户分配和功率控制问题,优化NOMA系统的和速率。首先,介绍了NOMA
在物联网系统中,众多发射机同时通过多径衰落信道将消息发送到基站。其中非相干通信由于不需要在接收端进行信道估计,在短包通信和低信噪比通信中具有性能优势,成为了近年来重点研究的对象。然而,传统的非相干收发机设计方法复杂度较高,难以适用于用户数量快速增长的物联网场景。因此,本文以大规模单输入多输出(Massive Single Input Multiple Output,Massive SIMO)中的非
随着第五代移动通信(The Fifth Generation,5G)技术商用,正交频分复用(Orthogonal Frequency Division Multiplexing,OFDM)技术广泛应用于各类通信场景中。5G微蜂窝通信设计中仍然存在多径衰落、阴影衰落以及大气衰落,给OFDM系统下的放大器效率带来了新的挑战。但由于OFDM高峰均比(Peak-to-Average Power,PAPR)
随着5G时代的到来,通信网络中流量和连接数急速地增长。在物联网(Internetof-Things,Io T)领域,“万物互联”正在变为现实,但是频谱资源的稀缺的问题逐渐凸显出来。环境反向散射通信(Ambient Backscatter Communication,Am BC)技术是物联网的解决方案之一,具有高频谱效率、低成本和低功耗等优点,一经提出就广受关注。对物联网设备进行定位在现实中有着很大
雷达组网探测威力分析是一种广泛使用的工具,其在军事领域中经常被用来确定雷达网在不低于一定概率的情况下能够探测到的雷达散射截面的区域。它是雷达网联合作战效能评估,防守侧责任区域划分,雷达网部署位置参数优化,进攻方突防路径规划等雷达军事领域的关键步骤。图像处理器拥有强大的并行浮点数运算能力。所以现如今GPU广泛应用于深度学习、雷达数据处理、图像分析等领域。GPU中有着大量且简单的逻辑运算器以实现大规模
在mmWave大规模MIMO通信系统中,使用大规模天线阵列可以弥补毫米波传输过程中的损耗,同时,预编码技术通过调整发射信号的相位和幅度来实现系统传输速率的提升,进而满足5G通信系统的高传输速率需求。然而大规模天线阵列会导致全数字预编码器使用大量的射频链路,造成不可估量的硬件复杂度和能耗。合理地设计混合预编码器可以减少射频链路的使用,降低模拟电路的成本,天线选择技术可以在混合预编码的基础上进一步降低
频控阵(Frequency Diverse Array,FDA)技术已应用在雷达系统,近几年频控阵(FDA)雷达和多输入多输出(Multiple-Input Multiple-Output,MIMO)技术的结合作为一种新体制雷达被提出。FDA-MIMO雷达通过在发射阵元上附加了频率偏移,其发射域导向矢量具有距离相关性。利用这一特性,本文开展了基于FDA-MIMO雷达的杂波抑制方法研究,重点解决了最
泥石流灾害一旦爆发往往带来巨大的人员伤亡和经济损失,给山区群众的生命财产造成严重威胁。我国山区地质条件复杂,泥石流灾害频发,依靠人工观测的传统手段无法进行全天候的有效监测。现有的泥石流预警装置对环境的适应性相对较差,测量参数也较为单一,相比国际上同类产品稳定性较低,野外恶劣工况下难以长期稳定工作。因此,有必要开发一种可在野外保持长期工作,可远程全自动全天候监控泥石流信息的监测设备。本文设计的地质灾
面对传统建筑行业对人力资源的迫切需求,机器人被广泛应用于建筑领域行业。针对目前室内抹灰机器人无法实现大面积准确识别、重建物体的问题,本论文研究了相移法技术、NCC算法立体匹配技术、三维点云重建技术等关键技术,最终采用了基于LCOS投影技术的三维重建方案,并对传统的算法进行了改进,搭建了一套基于LCOS的室内三维重建系统。本论文的大体研究方向如下:1、本文研究了室内多种三维重建技术,并对相移法相位解