草图用户界面是新一代自然用户界面。本课题针对当前WIMP界面存在的交互瓶颈和草图用户界面的自然性和高效性,在用户模型、手势描述、草图上下文感知技术和领域相关的草图信息表征等方面进行了深入的研究,在此基础上,研究了支持服装工艺概念设计和视频处理的草图用户界面关键技术,开发实现了相应的原型系统,并进行了可用性评估。本课题主要取得了以下创新性成果给出了草图信息模型以及基于认知心理学的草图界面的用户模型;研究并提出了基于上下文感知的交互模型和草图推荐技术;研究了面向概念设计过程的草图信息建模方式,构建支持工艺概念设计的草图用户界面;研究了面向视频内容的语义草图的描述方法,给出了一种基于草图的视频摘要生成方法,构建了面向视频媒体创建的草图用户界面,支持超视频的创建和浏览。研究成果打破了传统交互模式给用户带来的限制,允许用户通过自然的草图交互与计算机进行交流,提高了人机交互效率,减轻了用户的认知负荷。本课题的研究成果为新一代自然用户界面的研究提供了有力的理论基础和方法支持。
英文主题词sketch based interface; context-awareness;information representation;sketch interaction