位置：立项数据库 > 立项详情页
基于统计学习的语音驱动人脸表情动画研究
  • 项目名称：基于统计学习的语音驱动人脸表情动画研究
  • 项目类别：面上项目
  • 批准号：60875046
  • 申请代码：F030511
  • 项目来源：国家自然科学基金
  • 研究期限：2009-01-01-2011-12-31
  • 项目负责人：魏小鹏
  • 负责人职称：教授
  • 依托单位：大连大学
  • 批准年度：2008
中文摘要：

人脸表情是人类传达信息的重要方式之一，其包括复杂的生物特性与人类行为。本项目基于语音情感提取技术和三维运动捕捉技术，从"音"、"型"两个方面开展研究，提出了基于语音提取情感要素的新方法，构建了空间柔性人脸表情生成理论与方法体系，开发了相应的人脸表情动画生成系统。具体而言①提出了基于自整定权值K最近邻模型的语音情感识别方法；②提出了一种基于多模型融合的语音情感识别方法；③提出了GMM粗判、SVM细判的分层决策情感识别算法；④提出了基于空间几何柔性的人脸模板自动匹配方法；⑤提出了基于人脸运动捕捉数据的在线数据处理与轨迹光顺方法；⑥采用基于预计算的径向基函数交叉映射方法，实现了单一人脸三维运动捕捉数据的个性化表情动画生成方法。最终完成了基于人脸运动捕捉的数据处理及动画重构的原型系统开发。

中文主题词： 运动捕捉；表情重构；语音处理；情感识别
结论摘要：

英文主题词MoCap;Emotion restructure;Speech processing;Emotion recognition

成果综合统计
成果类型
数量
  • 期刊论文
  • 会议论文
  • 专利
  • 获奖
  • 著作
  • 34
  • 3
  • 4
  • 0
  • 0
期刊论文
人体运动捕捉数据特征提取与检索研究综述
半监督的三维网格模型层次分割
基于模板匹配的人体运动捕捉数据处理方法
3D motion retrieval measure based on SOM feature and PCA index
Features fusion based on FLD for face recognition
ICA-BASED FEATURES FUSION FOR FACE RECOGNITION
Evolutionary design based on an improved genetic algorithm and generative three-dimensional shape
3D Point Pattern Matching Based on Spatial Geometric Flexibility
Speech emotion recognition based on a modified -T-Nearest neighbor algorithm
3D Mesh Skeleton Extraction Using Prominent Segmentation
A Retrieval Method for Human Mocap Data Based on Biomimetic Pattern Recognition
基于改进遗传算法的形状进化设计及其三维图形生成
基于ICA多特征融合的人脸识别(英文)
三维网格分割的错分评价准则
基于PFICA和模糊积分的人脸识别
一种新的光学运动捕捉数据处理方法
An effective method of capture data processing for optical motion
Robust pitch estimation using a wavelet variance analysis model
A SEMANTIC JOINT-BASED NURBS HUMAN BODY MODEL FOR MOTION CAPTURE DATA
A Method of Hyper-sphere Cover in Multidimensional Space for Human Mocap Data Retrieval
Speech emotion recognition using mixed model
基于个人特征脸图像重构的人脸识别
Review of techniques for motion capture data processing
Reconfiguration of face expressions based on the discrete capture data of radial basis function interpolation
Research of global illumination algorithms rendering in glossy scene
Performance driven expression mapping based on segmented examples
A combinatorial approach to surface reconstruction
PITCH DETECTION USING CIRCULAR AVERAGE MAGNITUDE DIFFERENCE FUNCTION BASED ON WAVELET TRANSFORM
SPEECH ENHANCEMENT ALGORITHM BASED ON HIGHER-ORDER CUMULANTS PARAMETER ESTIMATION
AN AUTOMATIC ALGORITHM FOR ACCURATELY LOCATING CALIBRATION MARKERS ON A CHESSBOARD
会议论文
Creative design of solar energy portable lamp based on product gene and intuition models
Image encryption algorithm based on high-dimensional chaotic systems
An efficient sequence retrieval method based on motion capture data
专利
基于时空搜索数据处理的光学运动捕捉数据处理方法
基于模块分段线性模型的光学运动捕捉数据处理方法
基于动态模板的光学运动捕捉数据处理方法
一种运动捕捉的数据修复方法、系统及运动捕捉系统
相关项目
AVR虚拟人几何与运动重建的研究
期刊论文 10 会议论文 14 专利 2
基于GMM的Bayes错误率估计理论与非正面表情识别研究
期刊论文 12 会议论文 6 获奖 2 专利 6
基于现代语音处理技术的中医声诊信息自动识别的研究
期刊论文 7 会议论文 11
基于少量惯性传感器的实时运动捕捉方法研究
期刊论文 3 会议论文 3 获奖 2
基于动态图形模型和音视频的情感识别方法的研究
期刊论文 40 会议论文 9
基于视觉场计算理论的复杂场景重建研究
期刊论文 9 会议论文 6 专利 7
基于骨骼运动估计的三维表面恢复研究
期刊论文 15 会议论文 6
非特定人自然语音情感识别的建模方法研究
期刊论文 1 会议论文 14
具有环境普适性的实时人体姿态测量方法研究
期刊论文 16 会议论文 2
魏小鹏的项目
应对未料灾变的实存装备局部再设计理论与方法
期刊论文 16 会议论文 4
概念设计的人机协同演化方法研究
基于点云数据和运动捕捉数据的三维人体建模及动画仿真
期刊论文 1
基于演化的概念设计生物建模理论与方法研究
期刊论文 2
概念设计的人机协同演化方法研究
基于知识进化的人机协同创新方案设计理论与方法研究
期刊论文 5
面向复杂产品的多层次进化式设计理论与方法研究
期刊论文 28 会议论文 4 获奖 1