儿童三维人脸重建及其在孤独症干预系统中的应用

来源 :华中师范大学 | 被引量 : 0次 | 上传用户:caiqigang
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
三维人脸重建是计算机视觉领域的热门研究方向之一,在现实生活中有着广泛的应用,如人脸识别、游戏娱乐、影视动画等。本研究旨在从单张儿童人脸图像重建三维人脸模型,并将其融入基于卡通游戏的孤独症儿童干预系统之中,以缓解孤独症儿童在模仿、共情能力等方面的缺陷。构建具备高精度几何形状和光照一致性纹理的儿童三维人脸模型主要面临两大难题:1)数据缺失。由于高质量三维人脸扫描数据的获取成本高昂,当前缺少二维人脸和真实三维人脸的配对数据。此外,现有公共人脸数据集以成年人为主,缺少儿童人脸数据集,因此三维重建得不到具有儿童个性化风格的三维人脸模型。2)环境光照多样性。由于实际应用当中受不同环境光照的影响,重建的三维人脸模型的纹理色泽存在差异,融入到孤独症儿童干预系统中存在较大的违和感。为此,本文研究了基于半监督学习和颜色恒常性的儿童三维人脸重建算法,并将其应用于孤独症儿童教育干预系统。主要内容和贡献如下:1)针对数据缺失问题,本文提出了一种基于半监督学习的儿童三维人脸形状重建算法。对于监督学习部分,采用非对称欧几里得损失来约束训练;而对于自监督学习部分采用人脸特征点损失来约束训练。其中,监督学习训练采用公共的300WLP数据集,自监督学习训练采用自己收集的10万级规模的二维儿童人脸数据。两种学习方式在混合批次上联合训练神经网络,不断地对网络进行迭代调优。本文半监督学习的训练方式不仅可以重建出具有儿童个性化风格的三维人脸模型,并且能够提高神经网络模型的泛化能力。通过实验对比表明,本文方法能够重建出更具儿童个性化风格的三维人脸模型。2)针对环境光照多样性问题,本文提出了一种基于颜色恒常性的儿童三维人脸纹理重建算法。基于儿童三维人脸形状重建算法,在利用神经网络回归3DMM形状参数的同时回归相应的纹理参数,以重建儿童的三维人脸纹理。针对不同场景光源下对儿童人脸纹理颜色的影响,本文引入颜色恒常性算法,使得本文的网络模型能够从图像中消除环境光照的影响,获得原始场景图像,使得重建的儿童三维人脸更贴近真实人脸图像。实验结果表明,本文方法能够在不同光照环境下重建得到光照一致性的三维人脸纹理。3)基于上述两种算法,构建融入真实人物形象的儿童孤独症教育干预系统。通过三维人脸重建技术将孤独症儿童“映射”到虚拟情境中,孤独症儿童能够真正看到“我”参与到虚拟情境中之后,从而使他们产生“原来‘我’应该这样做”的刺激或心理暗示。通过这种方式来提高对孤独症儿童的教育干预效果,帮助其学习面部表情与成长。
其他文献
高等教育服务贸易正逐步成为服务贸易中各国重点关注的领域,而我国教育事业发展与经济发展不均衡、高等教育服务贸易长期发展不均衡,贸易逆差大,这需要重新审视其对我国经济增长的影响作用,增强对教育服务贸易重要性的认识,以提高高等教育国际化水平,更好地利用国际优质教育资源发展我国经济。本文首先理论分析了高等教育服务贸易与经济增长之间的关系及其作用机制,在理论分析的基础上,站在市场角度,以留学生教育为代表,基
在工程建设及城市规划期间,测绘工作是一项重要的工作内容,技术人员应根据实际要求,采取相应的测绘技术进行应用。就目前来说,传统测绘技术的应用已无法使现阶段智能城市测绘工作标准得到满足,地理信息系统的应用在一定程度上解决了传统测绘技术在应用过程中存在的不足,使测绘工作更加快捷高效。本文以智能城市测绘环节中,地理信息系统的应用为研究对象加以论述,总结地理信息系统定义,分析地理信息系统应用优势及作用,介绍
阅读策略单元以独立编排的形式呈现,是小学语文统编教材的一大创新。作为四大阅读策略单元之一的“提问策略单元”聚焦于学生提问策略的学习,对培养学生的阅读素养具有重要意义。“提问策略单元”的教学不仅可以完善学生的提问策略知识体系、有助于其思维品质的提升,还能促使学生由被动学习转向主动学习、促进其深度阅读。与此同时,提问策略单元的教学也给教师们带来了新的要求和挑战。面对全新的单元,与之相关的实证研究还不充
随着部编本小学语文教材在全国的推广使用,语文教育改革面临新的挑战。部编本小学语文教材的重大变革之一就是增加了四个阅读策略单元,独立分布于3至6四个年级。本文立足于教学实践,主要围绕部编本教材中四年级的“提问策略单元”展开研究,旨在探讨创设有效的问题情境和活跃的课堂学习氛围。提问是课堂教学中,师生围绕问题而展开的语言、思维上的交流活动。而“提问策略单元”作为一个新的板块,广大一线教师在教学中并未明显
本文通过权衡海洋的开发和保护两个方面设计出勘探测绘水下无人机产品。通过调查分析国内外的水下无人机发展现状,根据国内需求,在寻找更多水下资源的同时又要确保海洋经济长期健康发展的前提下,分析水下无人机的多种功能,以及利用现有的智能信息技术,进行勘探海底地形、寻找鱼群、监测海洋生态、建立数字海洋等重大研究。最终设计出能在浅海、养殖水产品的水塘、人工鱼礁、水库、江河等多种场所应用,通过有缆方式传递数据信息
随着我国经济社会的不断发展与深入,我国基层党建工作环境也发生了一系列的变化,这些变化主要体现在基层党组织和人民群众之间的各种联系和关系上,而一定程度上来说,基层党建工作环境的变化给我国基层党建工作也带来了前所未有的挑战,出现了一系列亟待解决的新状况和新问题。对此,为了进一步做好新时期的基层党建工作,必须要对这些新状况和新问题进行深入的研究和剖析,并在此基础上进行针对性的解决,进而为基层党建工作的顺
<正> 笔者自拟活血通窍汤治疗血管神经性头痛五例,均获痊愈。一、方药组成:丹参、赤芍、川芎,郁金、地龙、远志、菖蒲。二、病例:宋×,男,55岁。1984年8月29日入院。头部胀痛七天,痛及双目,甚则如锥,伴恶心欲呕、身困纳差,舌质红、脉沉滑。西医诊断为“血管神经性头痛”。此为
期刊
头颈部鳞癌是最常见的恶性肿瘤之一,有很高的死亡率。本文基于癌症基因组图谱(TCGA)数据库中头颈部鳞癌样本的RNA测序数据和UCSC Xena数据库中头颈部鳞癌样本的临床数据,分析潜在预后免疫相关长链非编码RNA(lncRNA)的预后价值,并构建预后模型来评估头颈部鳞癌患者的生存结果,为头颈部鳞癌预后预测提供新的途径。本文的主要研究内容如下:(1)利用Cox比例风险模型和Lasso-Cox回归模型
藏北高原的双湖地区平均海拔超过5 000 m,该地区分布有岛状中纬度高海拔多年冻土,由于区内工程建设少,气候条件恶劣,对该地区多年冻土研究极少。通过大量现场调查、钻探、室内试验等研究表明:该区域多年冻土常分布于丘间凹地及平原地势较低处,岩芯中可见凝冰,冻土含冰量与地形、地下水、地表植被有一定关系。同时该地区多年冻土上限一般在2.0~2.8 m,冻土总含水率最高可达到58.2%,冻土工程特征与引起的
采用文献资料法和逻辑分析法,研究数字经济助力体育服务业高质量发展作用机理、分析现实困境、提出推进路径。在数字技术不断发展和数据生产要素加速驱动过程中,数字经济为体育服务高质量发展呈现出新的作用机理:优化体育产业结构、加快体育服务产业数字化转型升级,提升体育服务效率和深化金融数字化与体育产业融合发展。基于我国存在体育专业技术人才短缺,科技商业化运行机制创新不足,新技术数字鸿沟依存,数字技术发展超前、