位置:成果数据库 > 期刊 > 期刊详情页
基于多模态视觉特征的自然人机交互
  • ISSN号:0372-2112
  • 期刊名称:电子学报
  • 时间:2013
  • 页码:2223-2229
  • 分类:TP391.4[自动化与计算机技术—计算机应用技术;自动化与计算机技术—计算机科学与技术]
  • 作者机构:[1]上海大学通信与信息工程学院,上海200072, [2]新型显示技术及应用集成教育部重点实验室,上海200072
  • 相关基金:国家自然科学基金(No.11176016,No.60872117);高等学校博士学科点专项科研基金(No.20123108110014)
  • 相关项目:移动对象异常行为自动识别技术研究
作者: 管业鹏|
中文摘要:

针对目前人机交互中存在的问题与不足,提出了一种基于多模态视觉特征的人机交互新方法。采用二维Gabor小波提取全局人脸朝向视觉特征,克服人脸显著特征提取困难,以及不同人脸朝向特征区分的难度性;基于人脸几何分布特征,快速定位人眼中心,无需考虑人脸图像分辨率和人眼闭合及其配戴情况;通过对视觉特征的重要性评价,选取分类特性显著的多模态视觉特征进行机器学习与训练,确定用户所指目标,实现非穿戴自然人机交互,用户无需佩戴任何标记,且其活动不受约束,便于充分发挥其日常技能。通过实验对比,验证了文中所提方法有效、可行,可应用于实时非穿戴自然人机交互中。

英文摘要:

A novel human-computer interaction(HCI)is developed based on multimodal visual features aiming at some limits at present .Two-dimensional Gabor wavelet is adopted to extract some visual features of global face orientation ,which overcomes some difficulties including extraction of some facial distinct features ,discrimination among some different facial orientations .An ef-ficient and fast approach to locating center of eyes is proposed based on facial geometric distributions without considering facial res-olution ,eyes closing or opening and user′s wearing .Some prominent multimodal visual features for classification are selected to ma-chine learning and training to determine the pointing target after evaluating performance of some extracted visual features .Non-wearable and natural HCI modal can be realized in which user can move freely without wearing any markers when he points at some targets .Their daily skills can be exerted fully during HCI .Experiment results indicate that the developed approach is efficient and can be used to natural non-wearable HCI .

同期刊论文项目
同项目期刊论文
期刊信息
  • 《电子学报》
  • 中国科技核心期刊
  • 主管单位:中国科学技术协会
  • 主办单位:中国电子学会
  • 主编:郝跃
  • 地址:北京165信箱
  • 邮编:100036
  • 邮箱:new@ejournal.org.cn
  • 电话:010-68279116 68285082
  • 国际标准刊号:ISSN:0372-2112
  • 国内统一刊号:ISSN:11-2087/TN
  • 邮发代号:2-891
  • 获奖情况:
  • 2000年获国家期刊奖,2000年获国家自然科学基金志项基金支持,中国期刊方阵“双高”期刊
  • 国内外数据库收录:
  • 美国化学文摘(网络版),荷兰文摘与引文数据库,美国工程索引,美国剑桥科学文摘,日本日本科学技术振兴机构数据库,中国中国科技核心期刊,中国北大核心期刊(2004版),中国北大核心期刊(2008版),中国北大核心期刊(2011版),中国北大核心期刊(2014版),英国英国皇家化学学会文摘,中国北大核心期刊(2000版)
  • 被引量:57611