基于表情识别的情绪舒缓系统设计与实现

来源 :华南理工大学 | 被引量 : 0次 | 上传用户:pangpanghai
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
情绪影响着我们的日常行为,诸多场合都要求我们有一个平和的情绪状态。调节情绪的方法有很多种,音乐是一种有效的手段。相关研究表明,人可以通过聆听音乐来舒缓情绪,然而人对于音乐的偏好受到性格、情绪、环境等诸多因素影响,为保证使用音乐舒缓情绪时的客观有效性,需识别音乐具有的情绪特征。表情是表达情绪的主要方式,通过识别人的面部表情,可以获得当前的情绪状态。表情研究属于热门领域,在日常生活和商业环境中有广泛的应用前景。生活场景中表情大多通过摄像设备采集,属于序列图像,相关研究主要集中在峰值表情判别,这些模型对序列图像识别能力较差。由此,本文设计并实现了一种基于表情识别的情绪舒缓系统,可以通过识别用户的面部表情来判断情绪,同时播放舒缓相应情绪的音乐,达到平和情绪的目的。本文的主要工作如下:第一,提出一种基于排序网络的表情识别算法,通过实验验证有效性。该模型考虑了同种表情间存在较大差异的问题,对同种表情的不同等级进行表情排序识别,在识别序列图像时达到了较高的精度。针对表情图像数据较少的问题,采用了面部预处理和两阶段迁移学习策略提升模型精度。第二,提出一种识别音乐情绪特征的算法。该算法根据情绪舒缓系统的要求,利用情绪二维模型描述音乐,采用了包括过零率、谱质心、色度特征、梅尔频率倒谱系数、波形能量、频谱带宽等特征,设计了双二分类SVM模型进行分类。用实验验证了该算法的有效性,分析了音频采样时间对识别精度的影响,并验证了音乐情绪特征识别的可行性。第三,在x86计算机和安卓系统上部署了设计完成的模型,基于计算机和移动设备间计算能力、内存大小等差异性,对系统进行了相应的设计。计算机部署方案采用了浏览器前端和服务器后端的设计方案,经过实验验证该部署可以达到理论要求的准确率和实时性。移动端部署采用了将排序网络模型压缩内置的方案,实现了移动设备单机离线的情绪舒缓功能,通过实验验证该方案的可行性。
其他文献
高密度柔性集成电路基板(Flexible Integrated Circuit Substrate,FICS)是一种为电子元器件提供线路载体的高度密柔性电路板。随着电子产业的蓬勃发展,FICS也向体积小,线路密
信息化的日益发展在给人们带来不断便利的同时也带来了数字信息爆炸式的增长,传统的存储方式已无法满足对海量数据存储的需求。云存储由于其海量存储、低成本以及按需计费等
人才资源作为第一资源,是助力创新发展、推动社会进步的不竭动力。政府人才服务机构作为人才公共服务的引领者,推动了人才资源优化配置和合理流动、促进了就业和人才引进,为
近年来,随着金融市场的全球化,金融机构之间竞争越来越大。为了应对日趋激烈的金融战争,各种金融衍生产品运营而生。期权作为金融衍生产品的重要组成部分具有价值发现和风险
加兹尼王朝是公元10世纪最后二三十年兴起于阿富汗地区的穆斯林政权。其政权的建立连接了西亚、中亚与南亚地区,其统治在印度西北部地区产生了深远的影响。加兹尼王朝时期伊
古时候的城市设计是人们依据当地的生活方式,融合宗教、文化建造出适宜生活的环境。到二十世纪,人类社会进入迅猛发展的阶段。技术的建设力量和破坏力量在同时增加。城市问题
基层公安机关是维护我国社会稳定的中坚力量,也是日常生活中与人民群众接触最为频繁的一个政府机构。要实现基层公安机关职能的有效发挥,离不开基层民警的付出。但由于基层民
随着人类社会经济的发展和基础科学研究的进步,智能信息技术在人类的日常生活中扮演着越来越重要的角色,由此带来的个人信息安全问题受到了整个社会的高度重视。签名作为一种
随着互联网、大数据与人工智能的不断发展,互联网技术强势介入人类的现代生活。一方面,网络时代的到来为人们的生活带来诸多便利。网络购物、线上社交、互联网金融的发展引领
随着无线通信技术的发展,1G-4G多种多址接入技术的不断出现,为社会带来了巨大便利。5G时代的到来,新型多址技术也应时而生。其中,非正交多址接入(Non-Orthogonal Multiple Ac