人与虚拟物体之间自然和谐的交互是人机接口的研究热点。手势交互已成为众多应用的核心支撑技术。本项目针对在人手运动康复中各种精细动作训练的需要,对基于视觉和触觉感知的手势交互展开理论和方法研究。拟在对触觉感知的生理心理因素进行实验和分析的基础上,研究人手在自然环境中的触觉感知机制和动力学特征,并提出力触觉测量的快速标定装置及算法,结合视觉信息提高动作识别的准确率,同时研究无标记的人手三维形态的跟踪与重建问题。最后,将集成阶段性研究成果,设计一种面向自然交互的人手运动康复系统,对效果进行实验验证与评价。本项目从方法的通用性入手,从认知科学的角度阐明触觉感知与仪器测量之间存在的本质差异,从增强现实角度提出触觉视觉融合的实现方法,为人机交互技术提供新思路和理论依据。
英文主题词augmented reality;haptic;gesture;rehabilitation;