移动设备的小型化使用户便于携带,但是其屏幕较小,加上移动环境下用户视觉注意相对分散,对移动设备用户界面的可用性造成了很大的影响。声音交互无需利用屏幕,在移动环境下无需长期占用视觉注意力,因此可以采取声音增强的方式开发移动用户界面,在移动交互的情境中提供附加的听觉反馈通道,充分发挥视觉通道和听觉通道的优势,增加信息传递的带宽,改进移动用户界面的可用性。和一般的移动用户界面相比,声音增强移动用户界面的研究无论是在交互技术还是设计开发上都没有形成完整的、系统的理论体系和公认的准则。目前大多数的工作关注于其交互技术本身的研究,而缺乏对人类自身听觉特点的利用和如何用声音来表征信息的挖掘。目前也没有针对这种用户界面的设计流程和指导原则。本文作者对声音增强移动用户界面的理论模型、设计、原型和实验等方面进行了研究。从交互设计理论的角度,作者提出了声音增强移动用户界面模型、设计流程和指导原则。从评估的角度,作者提出了声音增强移动菜单的可用性评估方法。从界面设计开发的角度,作者提出了听觉场景的描述方法和设计方法,设计实现了一个声音合成辅助工具。从应用实践的角度,作者应用声音增强移动用户界面设计流程和指导原则、听觉场景的描述方法及设计方法,设计了声音增强移动菜单,实现了其原型,并对其原型和视觉菜单原型进行了对比实验。针对声音增强移动用户界面的设计,作者提出了声音增强移动用户界面的设计流程,同时提出了一套在声音增强移动用户界面设计中创建有效传达信息且易于识别的声音设计的指导原则,可作为声音增强移动用户界面设计的参考。针对声音增强移动用户界面中声音部分的设计,在分析听觉场景中声音成分各种关系的基础上,作者提出了听觉场景的形式化描述方法,并举例说明了其应用,然后提出了相应的听觉场景的设计方法,并给出了创建听觉场景的可视化设计工具的设计思路和软件架构。采用声音增强移动用户界面设计流程和指导原则、听觉场景的描述方法及设计方法,作者设计了声音增强移动菜单,采用.Net在移动设备上实现了其原型。针对声音增强移动菜单的评估,作者提出了相应的可用性评估方法,该方法有助于较全面地评价声音增强移动菜单的可用性水平,为声音增强移动菜单研究、设计与应用提供评价的基础。参照声音增强移动菜单的可用性评估方法,作者利用声音增强移动菜单原型和视觉菜单原型进行了相关的应用实验,来对声音增强移动菜单和视觉移动菜单的可用性进行比较研究,通过定性和定量相结合的方法来获得对声音增强移动菜单可用性的认识。对比研究结果表明声音增强移动菜单界面具有更好的可用性,可以让用户显著减少任务完成时间,降低工作负荷和脑力负荷。实验发现有效利用声音增强移动菜单交互技术可以提高移动终端视觉菜单的可用性,而且声音增强移动用户界面设计流程和指导原则、听觉场景的描述方法及设计方法可以指导相应的设计工作。