位置:成果数据库 > 期刊 > 期刊详情页
基于关键词识别的语音到手势的转换
  • ISSN号:1002-8331
  • 期刊名称:《计算机工程与应用》
  • 时间:0
  • 分类:TP391.41[自动化与计算机技术—计算机应用技术;自动化与计算机技术—计算机科学与技术] TN912.34[电子电信—通信与信息系统;电子电信—信息与通信工程]
  • 作者机构:[1]西北师范大学物理与电子工程学院,兰州730070
  • 相关基金:国家自然科学基金(No.61263036,No.61262055);甘肃省杰出青年基金(No.1210RJDA0071).
中文摘要:

针对言语障碍者与正常人的交流问题,提出了一种利用关键词识别技术实现语音到手势转换的方法。首先,对采集到的语音信号,运用关键词识别技术识别出关键词。同时,根据《中国手语》,采用三维建模技术建立关键词对应的三维手势模型。最后,利用OpenGL播放识别出的关键词对应的三维手势模型,从而实现了语音到手势的转换。实验结果表明,字母和数字的语音关键词的平均识别率达到90.1%,转换后的手势平均MOS(MeanOpinionScore)得分为4.4分,能够应用于正常人与言语障碍者的交流。

英文摘要:

This paper proposes a method to realize a speech-to-gesture conversion for communication between speech impediments and healthy people. The keyword spotting is employed to recognize the key words from input speech signals.At the same time, the three dimensional gesture models of keywords are built by 3D modeling technology according to the“Chinese sign language”. The speech-to-gesture conversion is finally realized by playing the corresponding 3D gestures with OpenGL from the results of keyword spotting. Tests show that the realized keyword spotting achieves 90.1% of average recognition rate on letters and numbers. The converted gestures obtain 4.4 of mean opinion score. Therefore the proposed method can be applied to the communications between normal persons and speech impediments.

同期刊论文项目
同项目期刊论文
期刊信息
  • 《计算机工程与应用》
  • 北大核心期刊(2014版)
  • 主管单位:中国电子科技集团公司
  • 主办单位:华北计算技术研究所
  • 主编:怀进鹏
  • 地址:北京市海淀区北四环中路211号北京619信箱26分箱
  • 邮编:100083
  • 邮箱:ceaj@vip.163.com
  • 电话:
  • 国际标准刊号:ISSN:1002-8331
  • 国内统一刊号:ISSN:11-2127/TP
  • 邮发代号:82-605
  • 获奖情况:
  • 1. 2012年首批获得中国学术文献评价中心发布的 “...,2. 2001年获得新闻出版署“中国期刊方阵双效期刊”,3. 2008年首批入选国家科技部“中国精品科技期刊...,4.2003年-2011年连续获得工业和信息化部期刊最高...
  • 国内外数据库收录:
  • 俄罗斯文摘杂志,波兰哥白尼索引,美国剑桥科学文摘,英国科学文摘数据库,日本日本科学技术振兴机构数据库,中国中国科技核心期刊,中国北大核心期刊(2004版),中国北大核心期刊(2008版),中国北大核心期刊(2014版),中国北大核心期刊(2000版)
  • 被引量:97887