位置：立项数据库 > 立项详情页
基于动态图形模型和音视频的情感识别方法的研究
  • 项目名称：基于动态图形模型和音视频的情感识别方法的研究
  • 项目类别：面上项目
  • 批准号：60673190
  • 申请代码：F020506
  • 项目来源：国家自然科学基金
  • 研究期限：2007-01-01-2009-12-31
  • 项目负责人：詹永照
  • 负责人职称：教授
  • 依托单位：江苏大学
  • 批准年度：2006
中文摘要：

本项目旨在利用动态图形模型允许观察值缺省和隐状态丢失的特性，解决在视频丢帧、音频干扰的情况下准确、实时识别表演者情感的问题。本项目主要研究基于视频的混合式情感特征提取方法，针对面部表情的不同单元采取不同方法提取情感特征，在保留情感信息的前提下最大限度地降低情感特征的数据维度；研究基于回归分析和一致性选择相结合的实时语音情感特征提取方法，结合实时语音特点，考虑说话的时长、环境及不同说话者等相关因素，提取较现有声学特征丰富的语音情感信息；研究构建允许观察值和状态缺省的动态图形模型的一般方法，并用此方法构建二维嵌入式动态图形模型，该模型能够融合音视频特征，允许音频信息干扰甚至丢失，允许视频序列丢帧、视频图象中因脸部旋转运动造成的表情关键区域丢失等情形，同时快速、准确地识别音视频环境中表演者的情感类别。本项目的研究成果可应用于开发智能化、人性化的新型人机交互环境，将产生很好的经济效益和社会效益。

中文主题词： 人机交互;情感特征提取;动态图形模型;情感识别
成果综合统计
成果类型
数量
  • 期刊论文
  • 会议论文
  • 专利
  • 获奖
  • 著作
  • 40
  • 9
  • 0
  • 0
  • 0
期刊论文
视觉属性学习应用研究
基于D-S证据的多粒度语段融合语音情感识别
A New Classifier for Facial Expression Recognition: Fuzzy Buried Markov Model
A Novel Hierarchical Speech Emotion Recognition Method Based on Improved DDAGSVM
Speech Emotion Recognition Method Based on SVM Decision Tree and Layered Feature Selection
基于混合特征和多HMM融合的图像序列表情识别
运动人体感兴趣区域的自动检测
Extraction and Analysis of the Speech Emotion Features Based on Multi-fractal Spectrum
Speech Emotion Recognition Method Based on Selective Features and Decision Binary Tree
模糊深隐马尔可夫模型研究
基于小波分解和优选的VLBP特征的表情识别方法
Facial Expression Recognition Based on Hybrid Features and Fusing Discrete HMMs
Ontology Based Situation Analysis and Encouragement in E-Learning System
近似人脸全视角图生成及在特定人脸模型映射
基于多频域LBP-TOP的人脸表情识别
基于混合特征和分类树的细微表情识别方法
基于对象模糊密度赋值的决策层融合算法
一种加权矩形提取表情特征的方法
基于中心域的LPP算法研究
基于概率距离及融合时空特征的镜头相似性度量
支持向量描述鉴别分析及在人脸识别中的应用
基于优选LBP与加权SVM的年龄估计
基于两次检测曲线的压缩视频关键帧提取
基于CBP-TOP特征的人脸表情识别
基于情境感知和本体的E-Learning系统研究
一种结合多特征的前方车辆检测与跟踪方法
基于UWPCA与粗糙集相结合的表情识别
基于粗糙集的表情特征选择
基于高斯金字塔与差分法的多目标检测和跟踪算法
基于多方向滤波的人脸年龄图像合成方法
基于感兴趣区域的运动人体跟踪
基于群体智能与K-均值相结合的关键帧提取
Semi-supervised classification based on Markov Random Field and Robust Error Function
Facial Expression Recognition Based on Combined HMM
基于样本投影分布的平衡不平衡数据集分类
基于典型相关分析特征融合的人脸表情识别方法
基于自调节分类面SVM的平衡不平衡数据分类
Facial Expression Recognition Based on Selective Feature Extraction and Rule Matching
最大间隔最小体积球形支持向量机
具有噪声过滤功能的协同训练半监督主动学习算法
会议论文
Facial Expression Recognition Based on HMM and Mixture HMM Combined by KNN
Extraction and Analysis of the Speech Emotion Features Based on Multi-fractal Spectrum
Upper Facial Action Units Recognition Based on KPCA and SVM
基于改进有向无环图的分层语音情感识别新方法
A guide Based on Situation and Emotion Analysis in Ontology-Based E-learning System
Co-Training Semi-Supervised Active Learning Algorithm based on Noise Filter
Adaptive and Optimal Classification of Speech Emotion Recognition
A New Approach for Facial Expression Recognition Based on Burial Markov Model
Speech Emotion Feature Selection Method Based on Contribution Analysis Algorithm of Neural Network.
相关项目
基于多目视觉的形体语言感知与识别研究
期刊论文 49 会议论文 22 著作 1
基于人工心理的机器人的仿人交互与合作研究
期刊论文 19 会议论文 1 著作 4
智能轮椅的人体动作交互及其肢体协调控制方法研究
会议论文 14
大规模数字化控制系统中人的认知行为研究
期刊论文 47 会议论文 5
红外电视法视线跟踪人机交互自适应工作机制研究
期刊论文 15 会议论文 6
基于GMM的Bayes错误率估计理论与非正面表情识别研究
期刊论文 12 会议论文 6 获奖 2 专利 6
基于自然手势的三维交互技术研究
期刊论文 7
基于认知机理和手势动画的三维人机交互界面研究
期刊论文 65 会议论文 28 获奖 6 著作 2
e-Learning中基于交互文本的情感交互方法研究
期刊论文 11 会议论文 5 专利 4
詹永照的项目
基于稀疏表示和超图的视频事件语义分析方法研究
期刊论文 50 会议论文 9
基于语义概念深度挖掘的视频复杂事件检测方法研究
远程协作系统中的感知处理技术的研究
期刊论文 11