情感在认知和人机交互中起着非常重要的作用,是反映客观现实的内在动力。现有的e-Learning系统往往忽视这一点,教师和学生在空间上是分离的,他们之间缺少情感交流和反馈,如果学生长时间感受不到交互的乐趣和情感的激励时,就会产生反感和厌倦情绪。本项目针对目前远程教育系统中情感缺失的问题,确定了基本学习情感状态集,建立了3个学习情感数据集,研究了能够应用于实际学习环境的多模态情感识别方法和基于分层任务网规划的多模态情感融合技术,在e_Learning系统中监测和分析学习者的认知与情感,研究与实现了基于动态贝叶斯网络的自适应情感交互学习模型,以指导教师调整教学策略和系统进行及时的情感干预,实现自然和谐的师生情感交互,让学习者获得最为有效和个性化的数字学习体验。
英文主题词affective computing; emotion detection; student emotion ; multi-modal fusion; affective interaction