位置:立项数据库 > 立项详情页
情感驱动的人机交互中文本语音情感信息耦合关键技术研究
  • 项目名称:情感驱动的人机交互中文本语音情感信息耦合关键技术研究
  • 项目类别:青年科学基金项目
  • 批准号:61203315
  • 申请代码:F030511
  • 项目来源:国家自然科学基金
  • 研究期限:2013-01-01-2015-12-31
  • 项目负责人:孙晓
  • 依托单位:合肥工业大学
  • 批准年度:2012
中文摘要:

文本和语音是人机交互中最基础最丰富的信息载体,本项目依据耦合关系对人机交互中的文本和语音情感特性进行分析,以文本为基础、语音为补充,将文本和语音中的情感特征进行耦合,同时基于耦合情感特征对交互中情感转移进行挖掘和表示,为深入研究人机交互中的情感转移机理,实现自然和谐的人机交互奠定基础。通过对交互中情感表达完整性分析,针对文本语音同步关联关系的描述问题,提出在词、短语、句子等多层次进行多粒度文本语音情感耦合,研究基于多粒度的文本语音多模态情感特征级与决策级融合模型,多粒度多模态情感信息处理较单一模态或单一粒度有更大的优越性;基于文本语音耦合情感特征,引入情感语义研究人机交互中情感转移机理,构建完善个性情感转移网络,以情感驱动人机交互。本研究对于对在认知科学上探索大脑对多模态情感信息的分析与处理的机理、揭示人类会话过程中各媒介之间相互作用、进而加深对大脑中情感的解析理解具有重要科学意义。

结论摘要:

英文主题词Text speech interaction;Human-machine conversation;affective computing;Multimodal information fusion;Emotion transition


成果综合统计
成果类型
数量
  • 期刊论文
  • 会议论文
  • 专利
  • 获奖
  • 著作
  • 18
  • 15
  • 0
  • 14
  • 0
相关项目
期刊论文 23 会议论文 1
期刊论文 6 会议论文 13
期刊论文 80 会议论文 76 获奖 1 著作 8
期刊论文 7 会议论文 7 专利 1
孙晓的项目