本子项目研究多通道人机交互技术中的一些基础问题,提出了面向任务的多通道界面结构和整合模型—ATOM(Architecture and integration for Task Oriented Multimodality),支持多通道的新一代界面模型—VIR(Virtual Information Room),层次化的多通道界面描述方法—HMIS(Hierarchical Multimodal Interface Specification),并提出了“交互原语”概念,对输入原语进行了研究。在多通道理论研究的基础上,实现了基于VRML的多通道交互虚拟现实PC平台VRoom,和多通道人机交互的实例——中国象棋的交互软件。