基于深度学习的人脸表情识别方法研究

来源 :广西师范大学 | 被引量 : 0次 | 上传用户:panshuangchun
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
在人与人的沟通和交流方式中,表情作为映射人类内心情感世界最为直观的方式,是分析情感的重要途经。人脸表情识别作为情感分析计算的重要组成部分,在远程教育、智慧医疗、人机交互等方面有着广泛的研究与应用。传统的表情识别方法依赖手工提取特征,过于复杂且识别精度低,已不适合当下应用的发展需求。而当前基于深度学习的人脸表情识别方法,具有自动提取人脸表情特征、计算速度快和识别准确度高的优点,已成为人脸表情识别任务中的主流研究方向。为了取得更高的人脸表情识别性能,现有卷积神经网络的层级越来越深,模型参数量越来越大,在影响速度的同时也造成更大的硬件需求,不易部署到实际场景应用中。更重要的是,加深网络层级并不能完全达到精确提取人脸关键区域表情特征的效果。表情识别任务的另一难点是人脸表情变化细微,不同表情存在类间相似性、类间差异小,不易区分,且每个个体间对表情的表现方式并不相同,这些都对提高表情识别的准确率存在一定的挑战性。针对上述问题,本文以图像处理和深度学习理论为基础,以对人脸表情进行精确识别为目标,对卷积神经网络在人脸表情识别任务中的方法与应用进行了研究,实现了对人脸表情的有效识别。本文完成的主要研究内容如下:(1)针对常用的卷积神经网络模型存在特征表达瓶颈、参数量冗余和计算成本高,同时无法对人脸表情图像关键区域的特征进行精准的提取等问题,本文提出了融入注意力的轻量级秩扩展网络人脸表情识别方法。该方法首先通过特征融合的方式对秩扩展网络的卷积层进行了改进,并删除冗余的瓶颈块,增强了模型对局部表情特征的关注,同时轻量化了网络。然后引入了注意力机制CA模块(Coordinate Attention,CA),使用残差学习的方法对CA模块进行改进,防止梯度消失,该模块通过捕获位置信息和通道关系的方法增强表情特征的表示,解决网络无法对人脸表情图像关键区域的特征进行精准提取的问题。且CA模块计算开销相当低,在不增加网络的负担下显著提高模型的性能。通过各组实验分析,在RAF-DB和FERPlus两个数据集上分别达到了88.10%和88.60%的表情识别准确率。证实了本文所提出改进网络在表情识别任务上性能的优越性。(2)针对真实世界下人脸表情的图像存在较高的表情多态性,每个个体间对表情的表现方式并不相同,对于相同表情,面部角度、遮挡、表情的表达幅度等存在较大差异,对于不同表情存在类间相似性、类间差异小,不易区分等问题,本文提出了一种基于细分结构的人脸表情识别方法。该方法首先在Re XNet-F网络上对表情图像进行一次粗分类,然后通过细分结构在卷积神经网络的训练过程中,从分类的角度利用上下文的信息,计算每个类的类中心,从而纠正许多之前粗分类错误的人脸表情图像,有效的削弱了人脸表情的多态性对表情识别任务的影响。在RAF-DB和FERPlus两个数据集上分别达到了88.00%和88.50%的表情识别准确率。(3)为了进一步提高人脸表情识别网络的性能,本文将基于细分结构的人脸表情识别网络模型与基于注意力的秩扩展网络表情识别模型进行融合,搭建了融合人脸表情识别网络模型。在RAF-DB和FERPlus两个数据集上的实验结果都比融合前的网络更高,且分别达到了88.43%和88.80%的表情识别准确率。表明了此融合模型实现了性能的互补,能够达到更好的人脸表情识别性能。
其他文献
某电厂采用“两级软化澄清+介质过滤+超滤+纳滤+反渗透”组合工艺处理循环水排污水,采用“化学软化+管式微滤+纳滤+海水淡化反渗透+电渗析+蒸发结晶”组合工艺处理末端废水,以实现全厂废水“零排放”。工程投运1年后,循环水处理系统出现纳滤出力不足,末端废水处理系统存在微滤膜有机污堵严重、电渗析硅结垢等问题。分析了膜污堵原因,对脱硫工艺用水进行了优化,从源头降低了脱硫废水化学需氧量(COD);同时优化了
实务中,需要明确袭警罪和妨害公务罪两者之间的关系,判断国家机关正常的公务活动为袭警罪所保护的法益,以此为基础对袭警罪进行认定。对协助人民警察的辅警实施暴力袭击行为成立袭警罪,暴力行为的程度要足以阻碍正常的公务活动,暴力行为不仅包括直接暴力还将对人民警察人身产生物理影响的间接暴力囊括其中。为履行公务而进行准备工作的人民警察或者在非工作时间依法履职的人民警察属于“正在”依法履职。职务行为的合法性是程序
庚子年,金运太过易克伐肝木而致肝气亏虚,经翻阅大量古籍文献及在实践中发现,糖尿病胃肠功能紊乱与肝有着密不可分的关系,笔者将从肝与脾胃、肝与大肠的关系展开论述以此来说明糖尿病胃肠功能紊乱与肝的关系。大补肝汤首载于《辅行诀》,该方的组成内涵与《黄帝内经》五脏的五味补泻恰好吻合,在历代传承中,大多方剂是以《伤寒杂病论》的理论及组方原则为基础发展而来的,因此大补肝汤的价值在临床上被忽略,徐江红教授多年临证
报纸
通过外掺Na2SO4和K2SO4将低热硅酸盐水泥、中热硅酸盐水泥和普通硅酸盐水泥总碱含量调节至1.2%,并使K2O/Na2O (质量比)控制在0.4~13.7范围内,探讨了K2O/Na2O对3种水泥基材料收缩和开裂的影响。并基于微量热技术、电子显微镜技术和能谱技术,揭示了K2O/Na2O对不同水泥基材料收缩和开裂的影响机制。研究表明,随K2O/Na2O的增加,低热硅酸盐水泥和普通硅酸盐水泥的自收缩
本文对烟气连续监测系统(CEMS)的构成进行分析,并探究该系统内关键技术的应用,包括气体污染物监测技术、气体流速测量技术、数据采集技术等方面,最后阐述该系统应用期间存在的问题与解决措施。力求通过本文研究,使电厂烟气排放情况得到实时跟踪,促进企业经济与生态效益的全面提升。
<正>中国制造的转型升级离不开一支高素质的产业工人队伍。习近平总书记强调:"工业强国都是技师技工的大国,我们要有很强的技术工作队伍"。这一论断深刻提示了建设一支高素质的技术工人队伍是实现工业强国的必由之路,阐述了产业工人队伍建设对于我国走新型工业化道路的重大意义。工会作为产业工人队伍利益的代表者和维护者,在推进新时代产业工人队伍建设改革中肩负着义不容辞的重要职责,必须在改革中求创新,在创新中谋发展
期刊
袭警罪在《刑法修正案(十一)》实施后单独成罪,对于进一步保护警察执法权具有积极意义。准确理解适用袭警罪,需要关注其设立的背景,从法条规定的罪状着手,对其暴力程度、行为方式、行为对象、加重情节等加以分析,袭警罪中的暴力包括对人对物两层含义,暴力手段具有袭击性,犯罪对象包括依法执行警务的辅警,加重情节适用需把握行为手段的相当性、手段与结果的递进关系、实害结果的范围等。同时,需注意袭警罪与妨害公务罪两者
该文分析了低热水泥全级配混凝土断裂性能的尺寸效应规律。通过在大坝工程施工现场浇筑成型试件有效高度为0.75 m、1.5 m和2.25 m的楔入劈拉试件并开展试验,获得低热水泥全级配混凝土稳定的双K断裂参数。基于试验结果,采用理论方法推求全级配混凝土无尺寸效应的失稳和起裂韧度,预测任意尺寸试件的最大和起裂水平荷载。研究发现,当韧带高度与骨料最大粒径比值大于等于6.0后,双K断裂参数趋于稳定。尺寸效应