基于小分辨率人脸的情感识别及其在信息化教学中的应用

来源 :上海交通大学 | 被引量 : 0次 | 上传用户:habits
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
情感分析在心理学、语言学、神经学等众多学科中都具有重大应用,而表情是人们日常了解对方情感的主要媒介。近年来,由于计算机软硬件的蓬勃发展,让计算机“读懂”人类的情感成为了可能。计算机理解人类情感的途径主要有计算机视觉以及语音处理两大类。通过计算机去区分人的面部表情即表情识别/情感识别是通过计算机视觉的方式向计算机解析情感。通过图像处理及模式识别技术进行机器自动表情识别已有近40年的研究历史,它也一直是计算机图像领域的研究热点。机器自动识别面部表情不仅能对已有的材料进行情感分析,而且能够进一步增强人机交互的友好性和智能性。百年大计,教育为本。情感作为教学活动中的一种重要的非智力因素,它能够促进学习者的学习动机、创设优良的教学情境、推动学习者的认知和人格的健康发展。对于传统教学、网络教学有着重大意义。为了有效评估教学中学生的情感状态,本文以真实的课堂场景为基础,提出了一种基于视频流的真实课堂视频场景下的情感识别方法,具体工作有:不同与以往的研究把表情分为六大类,在实际课堂中像惊讶、害怕这样的表情在课堂上出现的次数非常的少。即便出现对学生学习状态的判断意义也不大。因此本文的第一个工作是根据实际数据重定义表情,使得检测结果符合学生课堂上经常出现的面部表现的同时也能表达出学生的学习状态。第二,针对自然课堂中出现的小分辨率人脸场景,本文改进了在自然环境下的人脸对齐即人脸特征点检测方法以提取人脸的形状特征。文中创新采用双层级联卷积神经网络检测68个人脸特征点,与同时期人脸对齐领域文章比较特征点定位准确度有了很大的提升。最后,对课堂视频数据源中出现的小分辨率人脸做增强预处理,然后利用改进了的人脸特征点检测算法计算特征点位移,结合时序形状特征LBP-TOP对课堂中学生人脸的情感进行了集成分类,并达到较好的分类准确度。
其他文献
卷积神经网络近几年来发展迅速,出现了各种网络结构,针对问题选择合适的网络结构,需要专业人员大量的时间进行设计。如何降低神经网络结构设计成本,是神经网络更广泛应用必须面临的问题。近几年,有学者提出利用进化算法搜索合适的神经网络结构,但这些算法计算成本较高,无法使用较少的资源进行计算。本文主要讨论了已有进化神经网络算法,提出一种基于已有的网络子结构进行神经网络结构搜索的进化神经网络算法,以降低结构搜索
目前,随着大数据、人工智能、5G等新兴技术的不断进步,网络的创新突破也成为智能化进程的重要环节。网络空间中所存储的海量内容蕴含了丰富的语义及情感信息,具有重要的研究价值,能够促进网络智能化发展,因此发展以内容为中心的网络已成为主流趋势。同时随着以人为中心的服务需求不断增长,对不同场景和人类意图的内容认知要求也逐步提高。而现有的网络无法以人类可以理解的方式处理信息,也没有考虑其思想和精神层面的内在需
目的:探究不同严重程度认知障碍组别间脑内扩张血管周围间隙(enlarged perivascular spaces,EPVS)和脑白质高信号(white matter hyperintensity,WMH)的差异,分析EPVS、WMH和认知功能的相关性。通过神经心理学评估及影像学检查初步筛选主观认知下降(subjective cognitive decline,SCD1)及轻微认知下降者(subt
目的:探索儿童卵巢未成熟畸胎瘤的miRNA分子表达谱并筛选其特异性分子标记物。方法:收集儿童卵巢肿瘤组织标本共20例,其中18例为石蜡切片标本,包括卵巢囊肿2例、成熟型畸胎瘤3例、未成熟畸胎瘤6例、卵黄囊瘤3例、幼年型颗粒细胞瘤3例、无性细胞瘤1例;2例为冰冻组织标本,1例为成熟型畸胎瘤,1例为卵黄囊瘤。运用美国安捷伦公司的基因芯片检测样本表达的miRNA,分为三组进行统计学分析,主要将卵巢未成熟
目的:酒精、烟草、苯二氮?类药物及其他非法成瘾物质的滥用(成瘾)是一个严重的公共卫生问题,影响到个体健康以及社会安定。考虑到目前社区医疗机构对药物滥用干预服务的不足,以及简短干预在其他国家减少药物滥用问题的可接受性,可行性和有效性,我们在中国五地区的社区医疗机构进行了多中心的临床试验。目的是比较强化干预组、简短干预组与对照组在减少物质滥用行为上(任何非法药物使用或处方药滥用)的有效性。方法:设计:
应用在工业领域的基于时隙跳频的大规模无线传感器网络,是由大量无线传感器节点组成的树状拓扑网络。在这种汇聚型网络中,处于根节点附近的热点区域节点承担了大量上下行数据的收发工作,发生拥塞的风险很大。因此,如何解决无线传感器网络中的拥塞控制是无线传感器网络研究的重要课题之一。现有的拥塞控制算法都是从抑制报文发送速率的角度出发,将大量并发的数据包后压,从而达到缓解网络拥塞的目的。但是,实际上终端节点设备并
卡通角色是机器很难理解的一种艺术形式。对角色的身体解析是一种类似于细粒度语义分割的方法,可以帮助机器理解卡通角色。虽然关于卡通解析任务的研究非常有限,但是对自然图像的研究却很丰富。在这一领域,前沿的研究使用深度卷积神经网络(DCNN),但是需要大量的数据才能取得很好的结果。由于卡通画具有无限多种独特的绘画风格,并且数据集稀少,卡通角色解析任务的复杂性远高于自然图像的人物解析任务。在本文中,卡通狗是
随着视频拍摄设备的普及以及视频编辑软件的出现,越来越多的视频内容充斥在人们的生活中而视频编辑的门槛也越来越低。有一些不法分子会通过篡改视频的内容,把这些篡改视频加以传播,这会影响社会稳定。数字视频已经可以作为呈堂电子证据,若不能保证其原始性将严重危害司法秩序。由于视频如果经历过篡改,必然也会经历双次压缩,所以视频双压缩检测技术的研究对视频取证研究具有重要意义。本文主要研究GOP非对齐的视频双压缩检
目的:病毒性脑炎(viral encephalitis,VE)和自身免疫性脑炎(autoimmune encephalitis,AE)是儿童期最常见的两种脑炎,由于两者相似的临床表现和实验室指标,在疾病早期存在较大的误诊率,目前尚缺乏简便有效的指标来对两种脑炎进行早期鉴别。脑脊液免疫球蛋白是颅内体液免疫反应的标志物,病毒感染和自身免疫性疾病均会引起颅内免疫反应,但两者的免疫反应水平和类型不全相似,
太阳能、风能等可再生能源和工业余热具有波动性大和不连续的特点,无法作为稳定的能量源直接利用。储热技术是解决上述问题的有效手段,其中相变储热技术具备储热密度大、运行温度恒定以及技术相对成熟等优势,因而具有广阔的应用前景。传热强化是相变储热技术推广应用的重要研究内容,其中堆积床相变储热是一种高效的相变储热形式,但数值研究中已有模型的计算尺度不适用或者未能考虑径向孔隙率变化,而实验研究中缺乏对堆积床相变