基于深度学习的三维人脸重建技术研究

来源 :电子科技大学 | 被引量 : 0次 | 上传用户:dragoncool
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
在颌面整形医疗领域,医生为了制定手术或者治疗方案,需要对患者进行人脸建模。本文研究基于深度学习的人脸三维重建技术,并实现了一套颌面整形临床应用的人脸三维模型成像、重建及测量分析系统。立体匹配问题是三维表面重建技术中的关键环节,有效的图像特征提取是完成立体匹配的重要基础,本文实现了一种结合上下文语境特征和多尺度特征融合的立体匹配算法。上下文语境特征的采用可以解决图像中显著目标和不显著目标的特征信息的不均衡性问题,多尺度特征融合可以有效提取图像中同一目标的不同尺度特征信息。本文通过实验证明算法输出视差图的3像素匹配错误率可以降低4.57%,有效地提高了立体匹配算法的匹配准确率。原始图像中存在的遮挡、低纹理、光照不一致等病态问题是立体匹配算法面临的重要难题,本文实现了一个基于编码-解码架构的立体匹配算法。算法网络结构中加入了可以提取多尺度特征信息的空间金字塔网络模块,以及可以提取全局上下文信息的三维卷积网络。视差回归采用了可微的soft argmin函数,可以直接从视差成本量中回归出亚像素级视差值。实验测试显示,该算法有效降低了病态区域导致的误匹配概率,匹配速度可达到100毫秒/帧。人脸构造具有特殊性,从左耳到右耳涵盖了将近200度的范围。仅仅使用双目成像系统采集图像难以获得足够完整的面部信息。本文设计了一个基于多目立体视觉成像原理的图像采集系统,有效扩展了成像系统的拍摄视野。该采集系统整合了两个双目成像系统分别采集左侧面部和右侧面部图像,为重建算法提供了完整的面部图像。基于该方案所实现的系统在临床中已成功应用。基于以上工作,本文实现了一个基于深度学习的真实人脸三维重建及测量分析系统。系统采用被动立体视觉的面重建技术,可以实现一次拍摄即可重建高质量、真实感的人脸模型的目标。同时,为满足临床应用需要,系统还实现了对三维人脸模型距离、面积、曲率等参数的基本测量功能以及双人脸模型的配准功能,可以帮助医生对术前术后效果进行测量与分析。
其他文献
两《唐书·车(舆)服志》中关于女性服饰的记载非常丰富,这是中国服装史中的珍贵资料,也是今人研究中国服饰文化不可或缺的内容。从两《唐书·车(舆)服志》记载的襦裙装、胡服
双创生态系统的自演化,主要经历群落形成、资源集聚、功能聚合三大阶段。要把握发展契机,从双创生态系统的自演化机理出发,以代谢机制培育群落、以资源积聚丰富生态圈、以服
为了让学生掌握植物生长发育各阶段有效积温测定的方法,进一步加深对温度与植物关系的认识。详细阐述了植物生长发育有效积温测定的实验过程:将大豆种子和玉米种子植入三角瓶中
随着我国经济的快速增长,旅游业得到了迅速的发展,其对于经济发展的贡献越来越大。并且由于我国居民的收入水平和城镇化水平不断提高,促使国内外旅游需求不断扩大,旅游业已经成为
近年来我国银行间债务市场发展很快,截至2012年8月末,由中国交易商协会注册发行的银行间债务市场非金融企业债务融资工具以3.6万亿的存量余额,占全国直接债务融资规模60%的比
目的探讨人文关怀护理对直肠癌结肠造瘘口围手术期患者自我护理能力的影响。方法将128例直肠癌结肠造瘘口围手术期患者按实施人文关怀前后分为观察组和对照组,各64例。对照组
本文介绍了一种新型的模块化自升降脚手架遥控系统,该系统采用无线遥控模块实现提升过程控制,克服了普通自升降脚手架控制系统控制器过大,控制不灵活的缺点。对系统进行了可
密集欺骗式干扰不仅会引起大量虚警,还会抬高恒虚警检测器的门限,导致机载雷达的动目标检测性能严重下降。针对此问题,该文提出一种基于数据拟合的机载雷达抗密集欺骗式干扰
广西南丹地区尾矿分布于大厂、车河、芒场等矿区。尾砂来自以锡石为主的多金属矿床,尾砂中除Sn,Pb,Zn,Ag,Sb的质量分数达到工业指标外,Au亦达到综合利用指标。通过试验证明,
党的十八大报告明确指出:要用社会主义核心价值体系引领社会思潮、凝聚社会共识,全面提高公民道德素质,这是社会主义道德建设的基本任务,也是建设社会主义文化强国,实现全面建成小