面向图像的非刚体三维重建技术研究与应用

来源 :电子科技大学 | 被引量 : 0次 | 上传用户:zkhjpaul
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
近年来,对物体三维重建的研究多数是在形状大小不会发生改变的刚性物体上,而非刚体作为现实世界的重要组成部分,早期对其三维重建的方式也是基于刚体重建。这些方式将物体尽量作为一个整体进行建模,易产生模型重建偏差,导致很难还原非刚体的局部特征与生理形态。基于此,本文以研究非刚体的鸟类为例,分析与研究已有数据集,重定义鸟类骨架与关键点信息,设计基于局部刚度能量优化的非刚体三维重建算法。对比已有算法并进行实验,本算法取得了对细节还原更好的三维重建效果。本文的主要研究内容分为以下部分:(1)提出了非刚体局部刚度的形变算法。通过对鸟类的骨架分析,本文重定义了鸟类关键点,重点标注了易产生形变的关键部位。同时基于旋转矩阵与局部刚度的定义,结合壳能量函数优化方法,设计了非刚体局部刚度的形变算法。本算法将各个局部的刚度能量根据产生形变的权值分配来最小化,使得模型局部部位的微小形变更加拟合图像的局部特征的同时,不影响模型其余部位的形变。对比实验表明,关键点正确估计指标(PCK)平均高出对比算法模型2.55%,验证了局部刚度对于非刚体模型局部形变的促进作用。(2)提出了面向图像的非刚体三维重建算法。基于非刚体局部刚度的形变算法,旨在重建出完整的非刚体,本算法融合非刚性形变模块、相机位姿预测模块与纹理预测模块,将优化后的数据集预处理,通过最小化联合损失函数,执行对鸟类平均模型形变,重建出鸟类在关键点标注与局部非刚性形变约束下的三维模型,进而拟合鸟类这一非刚体物种的生理形态特征。本算法在交并比(Io U)指标中优于平均模型,以及在关键点正确估计指标(PCK)高出局部算法3.01%,证明了本算法在面向图像的非刚体三维整体重建中取得了正向效果。(3)设计并实现了面向图像的非刚体三维重建系统。基于本文算法框架,分析了非刚体重建的具体需求及其意义,设计了系统整体下各个模块的功能,实现了基于Django的面向图像的非刚体三维重建Web应用系统。本系统不仅能为用户展示已有的模型重建结果,还提供对自定义上传图像实现三维重建的功能。另外,本系统为用户提供了丰富的交互界面与良好的交互体验。本文着重关注非刚体在局部的形变,使得重建模型在一定指标上达到非刚性形变的效果,因此也设计与实现了面向图像的非刚体三维重建系统形成应用。
其他文献
群是现代科学中最重要的数学概念和工具之一,研究群的基本工具是群表示论。作为有限群复表示理论的核心,特征标理论有两个比较活跃的研究方向:特征标、共轭类的算术性质和特征标对群结构的影响。本文的主要结果分为三部分。第一部分关于特征标维数和共轭类长度的算术复杂性,我们研究了特征标理论中的核心问题:Huppert的ρ-σ猜想及相关问题。首先我们改进了一般群上的ρ-σ猜想的结果,之前最好的结果是CasolO和
海表温度(Sea Surface Temperature,SST)是海-气相互作用过程中物质和能量交换的一个重要参数,是研究大气和海洋环境变化的基本参数,是区域和全球尺度上气候变化的决定性因素。高精度和高时空分辨率的海表温度数据是海洋监测、气候变化预测、大气环流异常分析、海洋初级生产力和海洋渔业等研究领域的重要数据来源。Sentinel-3A上搭载的海洋和陆地表面温度辐射计(Sea and Lan
水流方向信息是水系网络提取过程中重要的输入数据。由于平地是没有局部高程梯度的区域,平地上的水流方向复杂,所以平地水流方向信息提取是整个水系网络提取中的重点和难点。同时,随着数字高程模型(DEM)精度的增加,DEM的数据量越来越大,传统的串行算法已经不能处理日益增加的数据量。为满足大数据量DEM上平地水流方向快速自动化提取的需求,本文改进了现有的平地水流方向串行提取算法,并设计了平地水流方向并行提取
九寨沟县在其脆弱的地质环境、巨大的地形起伏、复杂的地层岩性等基础地理环境因素影响下,区域地表形变活跃。加之在强烈的地质构造运动及降雨等因素的触发作用下,县域内各类地质灾害长期呈现出多发、易发、高发态势。由于研究区特殊的地形地质条件和丰富的植被覆盖,地质灾害隐蔽性较强,在灾害防治过程中难以实现早期预测,极易造成大规模的社会经济和人员损失。目前,九寨沟已被列为四川省地表形变的重点监测区,能够有效识别该
降水是水循环系统中的首要组成部分,具有重要的气候学、气象学、水文学意义,因此应用各类遥感数据源进行精准降水反演是一项颇具意义的科学研究工作。利用遥感技术反演降水可以弥补传统地面雨量计统计的不足,提高降水估计的范围、运行效率并降低成本。本文在综合国内外遥感反演降水的理论方法及实例应用的基础上,利用天气雷达和静止气象卫星数据开展对西南山地区域的降水估计方法研究。本文的主要研究内容如下:本文选用Hima
随着物联网技术的快速发展和大规模应用,物联网应用的安全问题已经成为备受关注的焦点。由于物联网环境的终端设备数量庞大,在考虑工作效率的情况下,很难采用常规的加密与数字签名技术来提供数据的机密性与可鉴别性。因此,研究高效的加密与数字签名技术成为物联网安全研究领域中核心工作之一。其中,聚合签名/签密是解决该问题的重要途径,但是现存的大多数聚合签名/签密方案均存在一个不足,即只要存在无效签名/签密,被聚合
树高是森林垂直结构的重要参数,可以用来评估森林的碳储量以及生物量。本文对美国北卡罗来纳州杜克森林和中国四川乐山的树高反演进行了研究。杜克森林的地形平缓或起伏不大,而乐山的地形比杜克森林崎岖的多。反演算法基于干涉和极化干涉技术,使用了ALOS PALSAR和Sentinel-1A SAR数据集。1)在L波段估计杜克森林地区的树高,分别使用了改进后的相干幅度法、旋转不变技术信号参数估计(Estimat
Born-Oppenheimer近似是分子物理中最基本的近似,但对于电子运动和核运动耦合较强的体系,如具有Jahn-Teller效应,Renner-Teller效应的分子体系,BO近似便不再适用。透热模型是处理这类问题的有效手段,其基本思想是通过构建新的透热电子态,减小甚至是消除透热表象中的非绝热耦合项。本文在前人研究的基础上对透热模型进行了一定的发展和推广,研究了多个具有C3v对称性的E e型J
对于非奇异射影曲面曲面S,它的n点Hilbert概型S[n]上的很多不变量都可以由S上的相关不变量显式表达,如Betti数,Hodge数配边类椭圆亏格等等。本文中,我们将如上结果推广到一些与S[n]上tautological丛相关积分的生成函数。我们主要利用了中的策略:1.利用[3]的结果化到P2和P1×P1的情形2.对P2和P1×P1的情形做局部化.化到C2的等变版本(equivariant v
随着计算机技术、数字通信、多媒体技术和网络技术的发展,高维数据作为一种重要的信息载体,已在军事、科技、商业和教育等方面广泛应用。不可避免地,由于获取设备故障或获取条件不佳等原因,所获取的高维数据经常存在缺失,噪声污染等现象。高维数据的退化大大降低了其在各个领域的应用价值。修复退化的高维数据中主要包括高维数据的修复效果和修复时间。数字图像尤其是高维图像(多时间、多光谱、多模态等)是最具代表性的高维数