会议专题

基于分层原语的多模态输入统一访问接口

非传统接口的人机交互应用程序通常需要针对不同的输入设备编写,应用程序的复用性较差。本文提出一种基于输入统一访问接口的交互程序开发模式,和一组适合于多模态接口的分层输入原语集合。我们将输入原语划分为“动作原语”、“姿态原语”和“命令原语”三个层次,每层原语分别面向输入交互过程的不同环节,逐步递进到与输入设备无关的交互命令; 基于该原语模型,我们设计实现了一个多模态输入统一访问接口──Inputware,将不同输入设备获得的用户操作转换为应用程序可以理解的功能命令,使得不同种类、不同模态的输入设备能够统一地用于各种应用程序;在一个三维虚拟场景漫游的应用实例中,我们利用统一访问接口实现了在键盘鼠标和新型三维操控器之间即时无缝切换,验证了其有效性。

人机交互 多模态输入 交互原语 软件框架

孟祥亮 史元春 杨欣

清华大学计算机科学与技术系 普适计算教育部重点实验室,北京 100084

国内会议

第四届和谐人机环境联合学术会议

昆明

中文

1-6

2008-10-25(万方平台首次上网日期,不代表论文的发表时间)