面向手势自然交互的人机相向互动模型与算法研究

来源 :济南大学 | 被引量 : 2次 | 上传用户:jzaf_com
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着计算机技术的不断发展,穿戴设备的更新换代以及人们对产品体验要求的不断提高,自然和谐的交互界面依然成为交互领域研究的热点。传统的以“机器为中心”的交互方式也逐渐向“以人为中心”转移。为了实现以人为中心的智能交互,计算机需要感知用户的操作意图,然后根据感知结果,主动辅助用户完成相应的操作,从而减轻用户的操作负担和认识负荷。感知用户的操作意图和辅助用户完成操作任务是实现“以人为中心”的关键,也是本文的重点研究内容。本论文依托国家自然科学基金项目(No.61472163,61603151)、国家重点研发计划项目(2016YFB1001403)和山东省重点研发计划项目(2015GGX101025)等项目基金的支持。以基于视觉的虚拟环境手势交互为应用平台,以降低用户认知负荷和操作负荷,提升用户体验为目标,对虚拟环境交互界面的用户意图进行感知,并根据感知结果进行互动的研究。本论文的研究内容和主要创新点体现在以下几个方面:(1)提出基于手势关键点变化趋势的动态手势识别方法通过顺时针获取手势的轮廓点,从而确定手势手指的个数以及指尖和指根的位置,并通过手指指尖和指根的运动趋势,来识别动态手势。通过对比实验表明,该方法具有良好的鲁棒性,对于分割不太好的情况下,仍有较好的识别效果,并且识别结果不受运动快慢的影响。对于常见的9种动态手势,该方法的平均识别率达到96%。(2)提出感知用户操作意图的感知算法通过分析用户控制虚拟人手选择物体时人手运动轨迹的特点,提出利用最小二乘法拟合手势运动轨迹曲线,并根据曲线的变化的趋势,预测用户想要操作的三维虚拟物体,然后主动将预测的物体移向虚拟人手;并且通过动态调整拟合数据,改善拟合效果,提高预测结果的正确性。(3)提出人机相向互动算法提出了两种感知互动算法:移动感知互动算法和旋转感知互动算法。通过识别物体移动的轨迹,系统感知用户是否组装物体,并根据感知结果更新场景状态,实现移动感知智能交互;系统根据顺时针旋转或逆时针旋转手势将三维物体进行相应的旋转,并将旋转结果作为隐式输入,感知用户操作意图;系统根据感知结果做出相应的操作,实现旋转互动效果。
其他文献
随着社会经济的发展,水泥在世界范围内被广泛应用,已经成为基础建设中必不可少的建筑材料,并且需求量越来越大,同时水泥的高质量和高性能也越来越受关注。从微观上来看,水泥
曲面网格参数化与四面体网格参数化是处理三维体网格的一个关键问题。曲面三角网格参数化是实现纹理贴图的基础;体网格的参数化是信息重用、形状匹配与分析、网格的重构以及
流程工业在生产的过程中会积累大量的检测数据,对这些数据进行知识发现将对工业生产和控制过程产生有意义的指导。在分析了流程工业生产过程的几大特点之后,课题组提出了流程
随着科学技术的发展和社会的不断进步,人类社会已经慢慢呈现出高度信息化结构。由于信息的多样性以及海量的信息数据,人类自身处理信息的能力十分有限,所以信息化时代已经正
近年来,随着我国石油天然气管道运输事业的快速发展,而管道施工的工程量大,焊口多,易发生质量问题,每处问题都可能导致严重的后果。这就对焊接自动化过程的质量控制提出了很高的要
蛋白质翻译后修饰在细胞生命过程中起到至关重要的作用,多种蛋白质翻译后修饰相互影响、相互协调,共同维持、促进各种细胞活动的正常进行。然而,翻译后修饰的鉴定在生物学上
N点相关函数在星系分布的研究上有重要的意义,是宇宙学模拟中的基本问题。但是朴素解法的计算复杂度却随着点集的扩大而呈点相关数的次方增长,虽然有基于KDTree等的相关优化算
在互联网不断普及的今天,基于网络的视频监控系统已经是未来视频监控系统的趋势。本文结合嵌入式系统的优势和特点以及无线网络技术,提出了一种无线视频监控系统的设计方案,完成
机器人发明以来,人类最大的梦想就是让机器人在自己生活的各领域都能够代替自己工作,服务机器人就是这个梦想的完成者。作为人类的替代品,服务机器人应该具有与人类相同的能
人类的主要视觉感知来自物体的颜色、纹理和形状。纹理是物体表面的一种基本的属性也是物体最重要的特征之一,可以用它来描述和区分物体。纹理分析是人类区分目标的重要感知功