【摘 要】
:
传统方法进行人眼视线估计时,由于复杂的硬件系统环境会导致人眼视线估计的结果出现较大误差。为了减小误差,本文简化硬件系统,只利用一个网络摄像头采集图像,并以深度学习理论为基础,在人脸关键点信息获取的基础之上,提出一种以人眼瞳孔定位与头部姿态估计相结合的方法,来提升人眼视线估计的精度。本文主要在以下几个方面展开了研究:(1)对人眼视线估计所需的人脸检测算法,人眼定位算法,头部姿态估计算法等进行深入研究
论文部分内容阅读
传统方法进行人眼视线估计时,由于复杂的硬件系统环境会导致人眼视线估计的结果出现较大误差。为了减小误差,本文简化硬件系统,只利用一个网络摄像头采集图像,并以深度学习理论为基础,在人脸关键点信息获取的基础之上,提出一种以人眼瞳孔定位与头部姿态估计相结合的方法,来提升人眼视线估计的精度。本文主要在以下几个方面展开了研究:(1)对人眼视线估计所需的人脸检测算法,人眼定位算法,头部姿态估计算法等进行深入研究,并对一些常用算法的基本原理以及网络结构进行分析。然后又对YOLOv3算法进行了改进,以Mobile Net-v3模型作为网络的backbone进行训练,以提高模型的训练速度。(2)提出了一种利用多角点联合检测的瞳孔定位方法。首先采用预先训练好的模型进行脸部和眼部检测,在此基础上利用眼部图像的角点信息,对瞳孔位置进行定位,通过实验论证对比,选取了4个角点联合检测瞳孔中心的位置。(3)改进了一种头部姿态估计方法,将深度残差网络Resnet-50与注意力机制模块相结合来训练网络模型。此方法借助数据集300W_LP中的图片训练头部姿态模型,然后进行姿态估计,最后在公共数据集上与其他方法进行平均误差的对比验证,通过对比表明本文所采用的头部姿态估计方法所产生的误差更小。(4)在人眼瞳孔定位和头部姿态估计算法改进研究的基础上,对人眼视线估计方法作出改进。在进行头部姿态估计时加入校正模块来减小误差,并结合人眼瞳孔中心的位置信息进行人眼视线估计,然后在MPⅡFace Gaze数据集上将基于MTCNN人脸关键点检测方法、基于FSA-Net算法的人眼视线估计方法以及本文方法分别进行对比,最终实验结果表明本文所采用的人眼视线估计方法优于其他两种方法,能够对视线方向做出更准确的判断。
其他文献
小学语文属于学生基础教育的一部分,学生在小学阶段需要提高自己各方面的能力,培养自己的世界观、人生观和价值观。小学语文教师不仅要讲授语文知识,同时也需要帮助学生提高情感沟通能力。情境教学法可以为学生营造沉浸式学习氛围。在情境课堂中,学生可以充分感受学习的乐趣。因此,教师要充分理解情境教学带来的益处,并掌握科学的情境教学步骤,促进情境教学在语文教学中的应用。
目的:了解高强度甚低频电磁辐射作业环境中作业人群的职业暴露现状及其内耳功能的变化。方法:以某高强度甚低频电磁辐射作业环境中作业人群为调研对象并将其分为长期暴露组(>5年)、短期暴露组(<5年)及对照组。应用电磁辐射场强仪和噪声分析仪对作业现场不同工作岗位的作业环境进行电磁辐射强度测试和噪声强度测试,观察作业环境的电磁污染和噪声污染现状。调研采取现场问卷调查的形式。所有调研对象均进行纯音测听(PTA
小学语文教学是提升小学生人文素养的重要学科,因此语文教师就需要积极为学生创设不同的情境,进而使其能够以高昂的热情参与到语文课堂学习中,同时也将为优化小学语文教学的质量效果奠定良好基础。因此本文将对情境教学法在语文课堂中的实施运用进行探究。
随着科技的发展,电子理疗因其无创的优点和良好的效果在理疗领域受到广泛关注和研究。近年来,随着电子医疗设备的迅速发展,人们生活质量的提高以及亚健康人数的递增,现有的理疗产品已无法满足人们在理疗过程中更好的理疗体验。为满足生活质量的需求,针对目前理疗仪产品智能化程度低、理疗感受不佳的问题,本文实现了一种基于表情识别的智能理疗仪系统。该系统通过上位机将实时识别的表情信息,传输到下位机STM32微控制器内
随着我国社会经济的发展、信息技术产业的飞速发展,火灾发生的频率越来越高,导致火灾发生的原因也越来多、越来越复杂。对于一般日常的消防演练,在演练中,会发生不定期的有些非预测性或者突发性的消防训练事故。此种消防训练的成本比较大,其中包括在形式上、花费上,并且一般不可重复利用,虚拟现实技术是一种利用现有计算机资源,使这些资源表现为一个或多个整合环境,从而提供一种可访问所有资源的一种技术。虚拟技术可以根据
CAN总线是自动化系统整体水平的基础技术,对我国科技发展以及国民经济有着重大影响,随着CAN总线的发展和相关协议日益成熟,由国外研究机构和芯片制造商研究开发的CAN总线控制器相继问世。我国相应的研究设计工作近年来才逐步开展。目前国内对于CAN总线控制器芯片研究尚处于起步阶段,通过国外的芯片研究其核心技术,在此技术上进行创新和改进,对于推动我国现有芯片技术和CAN总线通信在我国的发展具有一定作用,同
当前阶段,小学语文课堂教学各项工作已经越来越受到教育界乃至全社会的广泛关注和重视。情境教学法这种先进的教学理念与教学模式运用于语文课堂教学各个环节中,不但能够激发学生们的语文学习兴趣,而且能够有效培养小学生们语文学科核心素养。鉴于此,笔者在本文针对核心素养视域下的小学语文情境教学进行一定的分析和探究,并且提出一些合理化的教学建议,以供参考。
在虚拟现实技术日新月异的今天,人们对人机交互的要求也越来越高,总是希望以更直接、更自然、更逼真的方式来实现,特别是在通过手势进行人机交互的场景下。因此,对于人机交互中的手势识别的探索和完善具有相当重要的意义。当代,由于脑卒中引发的手功能障碍患者日渐增多,基于现有的手功能康复设备以机械设备为主,机械设备不仅会加重患者手的负担,而且缺少必要的沉浸式体验,不能对康复过程进行跟踪评估等问题。因此,本文提出
基于深度学习的无线胶囊内镜消化道图像辅助诊断,在近年来取得了显著成果。诊断过程中往往需要针对特定的消化道器官进行筛选和分析,并且单个患者的消化道数据集是非常庞大的。因此训练一个有效的模型用于对消化道器官进行自动分类,将极大地减轻诊断的工作量和提升诊断效率。在实际应用中,有监督学习技术容易取得较高的精度,仍占据着主要地位。但有监督学习需要足够多的标注数据进行模型训练,而收集和标注足够的消化道图像代价