基于多尺度与多模态融合的人脸活体检测算法研究

来源 :四川大学 | 被引量 : 0次 | 上传用户:liujmjm
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
在人脸识别领域,由于人脸数据易于获取的特点,使得人脸识别系统容易受到演示攻击,所以需要利用人脸活体检测技术对演示攻击进行防御。人脸活体检测技术通过检测并过滤伪造的攻击图像,达到抵御攻击的目的,从而避免人脸识别系统被攻破而造成的不必要的损失。本文首先从人脸活体检测数据集开展研究,针对现有数据集存在的一些问题,提出了一种多模态人脸活体检测数据集构建方案。然后在此基础上对基于深度学习的人脸活体检测算法进行了较为深入的研究,针对人脸活体检测算法的轻量化需求,提出了一种基于多尺度融合的轻量级人脸活体检测算法,针对现有方法没有充分利用多模态数据特性的问题,提出了一种基于多模态融合的人脸活体检测算法。本文的具体研究内容包括以下几个方面:1、构建了一个多模态人脸活体检测数据集。通过对现有公开数据集的研究和分析发现,这些数据集存在模态单一、分辨率低和采集质量不理想等问题,因此本文提出了一种多模态人脸活体检测数据集构建方案。提出的数据集包含了可见光、近红外和深度三种数据模态,并且每种模态图像的分辨率在现有数据集中都是最高的,在采集质量方面,通过一系列的设置和预处理手段使得采集的数据在人脸活体检测任务上具有较高的判别性。实验结果表明,各个模态的数据在人脸活体检测任务中具有一定的性能差异。2、提出了一种基于多尺度融合的轻量级人脸活体检测算法。人脸活体检测算法通常依附于人脸识别应用部署在嵌入式或者移动设备中,这就要求算法需要足够轻量化,现有算法对这个问题研究较少,因此本文提出了一种基于多尺度融合的轻量级人脸活体检测算法。该算法引入了多尺度融合和全局深度卷积以提升性能,使用Focal Loss以解决样本不均衡问题,使用微调后的Mobile Net V2作为主干网络以减少网络参数量和计算量。实验结果表明,本文提出的算法在保证较高检测性能的同时具有较小的参数量和计算量。3、提出了一种基于多模态融合的人脸活体检测算法。人脸活体检测任务中多模态数据具有一定的互补特性,融合之后能够充分发挥多模态数据的优势,而现有方法没有充分利用多模态数据的优势,因此本文提出了一种基于多模态融合的人脸活体检测算法。该方法利用近红外数据对数码设备的高防御力,提出了数码设备判别模块,根据多模态数据判别能力的差别,提出了一种多模态加权融合方式。实验结果表明,本文提出的算法能充分利用多模态数据的特性。
其他文献
并联机器人作为一类全新结构的工业机器人,经过半个世纪的发展,已经得到深入研究和广泛应用。相比于串联机器人,并联机器人具有精度高、刚度大、承载能力强、易于控制等诸多优势,被广泛应用于航天、航空、精密制造业等高精尖领域。以并联机器人为执行机构实现复杂型面、不规则孔洞等的原位高精度加工就是一种并联机器人新的应用场景。要实现并联机器人对不同类型工件的加工,首先需要对其机构自由度、运动学性能等方面进行研究。
宫颈癌一直危害着女性的身体健康,也是现代医学治疗领域中的一大难题。目前主流的治疗方式是采用化疗和放疗相结合,放疗一般又分为外照射和内照射。宫颈癌位于子宫颈部,如果采用外照射的放射方式,由于外照射放射剂量大而且范围广,从外向内进行照射,就会对其他正常的组织细胞产生伤害。所以一般采用近距离放疗的方式,它剂量低,辐射范围只针对肿瘤区域,粒子从内向外辐射,即能起到杀死肿瘤的作用,还减小了正常细胞的伤害,在
科学技术的发展带来了机器人技术的革新,从最初的只能示教再现的机器人,到具有初步感知编程能力的机器人,再到如今高度智能化的机器人,机器人技术经历了飞速发展的60年。如今,机器人在工业生产中扮演着重要的角色,展现出了巨大的发展前景。尽管机器人技术进步飞速,但六轴机器人的轨迹规划一直是一个难题,末端执行器在运行空间直线,空间圆弧等轨迹时,仍然会有描述轨迹的计算量过大,关节轴冲击过大和运行时间过长等问题,
SDN(Software Defined Network)是一种新型的网络架构,解耦控制平面与数据平面,实现网络的集中控制,有效解决了传统网络配置复杂、设备管理困难等问题,能更好的实现全局优化。但随着网络规模的不断扩张,单控制器部署有限的处理能力以及易出现单点失效等问题,已成为整个SDN网络的瓶颈。因而多控制器部署已成为必然趋势。但由于网络流量具有时变性和突发性,极易引发控制平面负载不均衡,致使网
叶片是航空发动机、燃气轮机等动力机械中的重要零件,其型面的加工质量严重影响着整机的工作性能,因此对其型面轮廓进行检测是十分必要的。叶片型面一般为变截面的扭转曲面,同时型面曲率变化较大,具有较大的检测难度。传统三坐标测量法通过获取叶片型面特定截面的轮廓数据评价出叶片加工质量,适用于精加工叶片的检测,无法反映出叶片整体的尺寸偏差,同时对检测环境具有较高的要求,无法实现叶片在线检测。随着光学测量技术的发
由于航空发动机机体结构复杂,具有拆装难、维修不易的特点,新手操作者对各种发动机零件类型的不熟悉,在航空发动机换发领域存在培训难上手、实践成本高等问题,因此,常利用目标检测方法对零件类型进行分类检测。但由于实际环境中零件堆放杂乱,容易出现遮挡的情况,利用传统的单一目标二维识别方法会因为无法提取足够的特征信息,易出现错误的检测结果,无法满足需求;同时,传统的换发培训流程是基于纸质或电子文档,培训效率较
随着网络规模的增大和新型网络应用的不断出现,网络流量呈指数级增长,如何根据网络的状态和需求找到一种实时的自适应的智能路由是提高网络资源利用和服务质量的关键。SDN(Software Defined Networks)的出现提供了灵活高效的网络控制,降低了路由优化的难度。数据驱动的方法适应并优化了网络的实际状态,随着机器学习在很多领域取得了非常不错的进展,许多研究者开始尝试使用机器学习来解决路由优化
三维人脸重建技术逐渐开始受到学者们的关注并在安防、医疗美容、影视娱乐等多个领域进行应用。目前三维采集需要通过昂贵的专业三维采集设备且需要较长的采集时间,而基于单张照片的三维人脸重建技术具有只需要用手机就能对人脸进行采集的优点。目前基于二维人脸照片进行三维人脸重建的算法生成三维人脸模型不能很好的表示人脸的细节信息,如皱纹等。对于以上问题,本文提出一种利用卷积神经网络对单张人脸照片重建出具有细节信息的
近年来随着5G、云计算、物联网的快速发展,各种网络应用层出不穷,网络规模不断扩大,网络流量爆发式增长。如何通过对网络流量的合理调度,避免网络拥塞,提高网络资源利用率,保证用户体验质量,越来越成为网络领域需要重点研究的问题。随着SDN网络架构的提出和对网络数据收集、分析能力的增强,再加之深度学习与深度强化学习在自适应学习、自动控制等领域的突破性进展,为可实时适应网络变化的动态、智能流量调度方法的实现
飞行模拟机在民航飞行员及相关从业人员的培训中具有极其重要的作用,可以显著的降低训练成本和提高训练安全性。飞行教员带领学员使用模拟机训练,一般按照训练清单进行逐项练习,根据训练大纲和个人经验对学员的表现进行评分,随后根据学员的分数安排后续训练。但是面对大量的考核项目,教员的评分容易受到疲劳和个人主观因素的影响,由此造成的评估偏差不利于受训人员水平的提高,造成大量的人力物力损失。现有解决此类问题的方法