位置:成果数据库 > 期刊 > 期刊详情页
基于深度信息和SURF-BoW的中国手语识别算法
  • ISSN号:1003-6059
  • 期刊名称:《模式识别与人工智能》
  • 时间:0
  • 分类:TP311[自动化与计算机技术—计算机软件与理论;自动化与计算机技术—计算机科学与技术]
  • 作者机构:[1]西北大学信息科学与技术学院,西安710127
  • 相关基金:国家自然科学基金项目(No.61075014)、高等学校博士学科点专项科研基金项目(No.20116102110027)资助
中文摘要:

为实现视频中手语的准确识别,提出一种基于深度图连续自适应均值漂移( DI_CamShift)和加速强健特征词包( SURF-BoW)的中国手语识别算法.该算法将Kinect作为手语视频采集设备,在获取彩色视频的同时得到其深度信息.算法首先计算深度图像中手语手势的主轴方向角和质心位置,通过调整搜索窗口对手势准确跟踪;然后使用基于深度积分图像的OTSU算法分割手势并提取其加速强健特征( SURF),进而构建SURF-BoW作为手语特征并使用SVM识别.通过实验验证该算法在单个手语字母上的最好识别率为99.37%,平均识别率为96.24%.

英文摘要:

To realize the accurate recognition of sign language in the video, an algorithm based on depth image CamShift( DI_CamShift) and speeded up robust features-bag of words ( SURF-BoW) is proposed. Kinect is used as the sign language video capture device to obtain both of the color video and depth image information of sign language gestures. Firstly, spindle direction angle and mass center position of the depth images are calculated and the search window is adjusted to track gesture. Next, an OTSU algorithm based on depth integral image is used for gesture segmentation, and the SURF features are extracted. Finally, SURF-BoW is built as the feature of sign language and SVM is utilized for recognition. The best recognition rate of single manual alphabet reaches 99 . 37%, and the average recognition rate is up to 96 . 24%.

同期刊论文项目
同项目期刊论文
期刊信息
  • 《模式识别与人工智能》
  • 中国科技核心期刊
  • 主管单位:中国科学技术协会 中国自动化学会
  • 主办单位:国家智能计算机研究开发中心 中国科学院合肥智能机械研究所
  • 主编:郑南宁
  • 地址:安徽省合肥市蜀山湖路350号中国科学院合肥智能机械研究所
  • 邮编:230031
  • 邮箱:bjb@iim.cas.cn
  • 电话:0551-5591176
  • 国际标准刊号:ISSN:1003-6059
  • 国内统一刊号:ISSN:34-1089/TP
  • 邮发代号:26-69
  • 获奖情况:
  • 国内外数据库收录:
  • 被引量:10169