基于视觉的情感人机交互研究是自然和谐的人机交互模式中的关键课题之一。本项目拟融合各种视觉信息,识别用户自发表情;并采用自上而下和自下而上相结合的方式推理用户情绪;在此基础上,对用户进行情感干预和辅助;最终应用于服务机器人情感人机交互。 本项目融合人眼、视线、头部和面部运动,识别自发表情,有效提高自发表情识别系统的鲁棒性。基于各种视觉信息,实现自下而上的表情识别;采用情感认知模型,自上而下地对动机、个性等各种上下文建模;融合两者实现情感推理,为上下文相关的、个性化的、多样性的情感推理提供有效的解决思路。在识别出用户的情感后,选择合适的时机,以合适的方式对用户情感进行干预和辅助,以调节用户处于正性的情感状态,对于实现用户与机器人之间的双向交互具有重要意义。
英文主题词expression recognition;emotion recognition;emphatic assistance;service robot;