基于眼动的人机自然交互

来源 :国防科学技术大学 | 被引量 : 0次 | 上传用户:wulixx
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
目前,人们的生活被各式数字化设备包围着,人类期待可以与高效率但略显死板的机器产生人与人之间一样自然的交流互动。相关研究表明,充分利用人的认知资源是实现人机自然交互的有效手段。在各类可观测的人体认知信息中,眼睛的运动有效反映了人们视线关注点的变化,和人们的关注目标、内心情绪以及任务意图有着十分密切关系,因此眼动信号可作为构建自然的人机交互系统(Human-Machine Interface,HMI)的一种理想输入。本文以眼动信号作为控制输入,针对不同的应用场景开发了两类非桌面式HMI系统。根据控制任务和技术路线的不同,这两类HMI系统可划分为基于注视点检测的静态对象控制系统和基于眼动模式识别的动态对象控制系统。基于注视点检测的静态对象控制系统。系统整合了视线输入通道与目标识别输入通道,通过双重选择机制,克服单一视线输入通道交互的所带来的米达斯接触问题。驻留时间方法进行第一层选择识别出可能是输入的注视,并提取感兴趣区域(Region of Interest,ROI)。第二层选择中,对ROI采用基于形状匹配的目标识别方法排除非输入的注视,并能对输入注视观察到的目标作出特定的响应。利用上述方法,以空调为实际被控对象,通过注视功能图标生成指令,控制空调执行开关、模式、升温和降温四个功能。基于眼动模式识别的动态对象控制系统。在分析了随意性眨眼、注视、上看、下看、左看和右看这六种眼动模式与瞳孔中心变化轨迹的关系之后,分析出是否为随意性眨眼的判断条件,并确定了以瞳孔中心横纵坐标对于采样点数的斜率作为其他五类的分类特征。斜率由RANSAC算法拟合直线得出。随后利用AdaBoost算法通过两两分类的方式,实现了了由四个分类器组成的分类方法。再对分类方法进行改进,使用SAMME算法直接进行五类分类。全向轮椅为实际被控对象,识别出上下左右看以及非随性眨眼等五种眼动模式后,生成相应指令驱动轮椅执行前进、后退、左移、右移和停止这五种功能。总体而言,本文围绕三个问题对基于眼动的人机交互进行了深入研究,即如何提取眼动信息、如何提取眼动信息特征并实现分类、如何运用分类结果控制外部设备。经过大量的实验,探索出了合理、高效的解决方案,结果验证了眼动用于人机交互的可行性和准确性,为将这种自然的人机交互应用于日常实际,特别是方便残疾人生活做了有益的尝试。
其他文献
本文主要针对角加速度伺服控制系统进行了设计研究,以典型机电伺服系统为背景,针对被控对象中存在的非线性摩擦、干扰力矩和负载变化等问题,在对加速度反馈性能进行研究的基
近年来,计算机仿真实验作为一种快速、高效的实验方法,已经在军事、航天、生物、医药等领域有着广泛的应用前景。在诸多应用中,存在大量的影响因子以及因子间错综复杂的相互
随着电力电子技术的发展和广泛应用,电力系统中非线性大功率干扰性负荷的种类、数量都在迅速增加,多数非线性负载的冲击性和不平衡性使电网的无功损耗增加,并造成波形畸变。大量的无功功率在电网中传输将使电能利用率大大降低且严重影响供电质量,波形畸变造成的谐波对电网带来极大的危害,若不加以控制,会严重影响电网安全、经济的运行。因此在电网中装设无功补偿装置成为满足电网无功需求,节约电能的重要方法。目前电力系统无
四足机器人可以稳定灵巧地执行军事运输、科学探索、灾难救援等野外任务,在执行这些任务时,它们展现了自身的大负载能力、柔顺性、稳定性以及环境适应性。四足机器人在台阶、
监控视频异常检测是智能监控技术的重要组成部分,其研究价值源于其潜在的的广阔应用需求。异常检测从原理上看,可以对异常数据建模,也可以对正常数据建模。但异常数据难于收
移动机器人自定位通常也称为位姿估计问题,是指在给定环境地图的条件下,根据传感器感知数据和机器人的运动控制估计机器人相对于环境地图的坐标。一般认为,自定位是智能移动
变速恒频风力发电系统的变速范围宽,风能利用效率高,广泛应用于大容量并网型风力发电系统中,具有良好的应用前景。通常对于采用双馈电机的变速恒频风力发电系统,多应用矢量变换方法和PI控制器进行控制。此控制方法依赖于电机参数,电机参数变化时,控制效果会受到影响。本文将自抗扰控制技术引入双馈风力发电系统控制,以提高系统的抗发电机参数扰动性。本文首先在变速恒频风力发电系统的基本原理和各部分数学模型基础之上,结
随着计算机技术、数字图象处理技术及相关理论的发展,计算机视觉的技术水平不断提高,应用领域迅速拓宽,在国防航天、工业自动化生产、交通监管等领域获得了越来越多的应用。
通信网络是满足人们远距离条件下信息传递需求的一项重要技术,而随着通信技术的日益发展,作为量子通信网络中的核心部件,量子路由器逐渐引起了研究人员的关注。如同在经典通
超声检测技术是无损检测领域中的一种重要方法,广泛应用于在线质量控制、在线设备和关键零部件的安全监测中。超声检测的数字化已经成为超声检测仪器发展的必然趋势。本文基