多点触控技术是当前人机交互领域的一项重要突破，它以裸手作为交互控制的媒介，以自然化、生活化的手势定义来降低人对设备的操作陌生度。本课题从二维平面上的多点触控交互以及三维空间中的多点触控指尖交互两个角度对多点触控技术进行了研究，重点分析两种复杂交互环境下的多触点检测方法。针对当前二维、三维场景中交互触点检测的困难性，本文研究并设计了能分别应用于两种复杂视觉环境下的触点检测算法。　　 由于传统二维多触点检测方法依赖于背景模型，使得系统抗干扰性以及适应性不强，针对该问题，本文首先通过分析触点图像的局部特征，将触点目标视为显著区域，运用视觉注意模型，本文设计了一种基于局部亮度显著度的多触点检测方法。该方法能够完成复杂图像中的触点分割，抗干扰能力强。　　 在三维多点触控方面，由于单幅二维图像对于三维信息的缺失，使得背景噪声对于系统的实际干扰很大。本文借助深度摄像头恢复图像景深信息，并且采用深度与肤色线索相结合的方法，本文设计了一种基于邻域均值差的指尖定位算法。该方法能够完成本文灰度似然图像中的指尖定位功能。　　 通过搭建系统平台并进行交互实验测试，验证了本文相关算法和策略能够满足复杂视觉环境下的二维与三维多点触控检测功能。在较为复杂的交互环境中，系统仍可达到85％以上的准确性，并且计算时延稳定于25ms左右，满足课题对于实时性的要求。