位置:成果数据库 > 期刊 > 期刊详情页
MapReduce框架下的实时大数据图像分类
  • ISSN号:1003-9775
  • 期刊名称:计算机辅助设计与图形学学报
  • 时间:2014
  • 页码:1263-1271
  • 分类:TP391[自动化与计算机技术—计算机应用技术;自动化与计算机技术—计算机科学与技术]
  • 作者机构:[1]大连理工大学电子信息与电气工程学部计算机科学与技术学院,大连116024, [2]大连理工大学创新实验学院,大连116024
  • 相关基金:国家自然科学基金(61173163,51105052,61370200)
  • 相关项目:基于流形学习和时序语义网挖掘的人体运动序列分析研究
中文摘要:

图像数据作为大数据的重要组成部分蕴含着丰富的知识,且图像分类有着广泛的应用,利用传统分类方法已经无法满足实时计算的需求.针对此问题,提出并行在线极端学习机算法.首先利用在线极端学习机理论得到隐层输出权值矩阵;其次根据MapReduce计算框架的特点对该矩阵进行分割,以代替原有大规模矩阵累乘操作,并将分割后的多个矩阵在不同工作节点上并行计算;最后将计算节点上的结果按键值合并,得到最终的分类器.在保证原有计算精度的前提下,将文中算法在MapReduce框架上进行拓展,以人脸图像为例对大规模图像数据进行分类的结果表明,该算法能够针对大数据图像进行快速、准确的分类.

英文摘要:

As an important part of big data,image data contains abundant knowledge.The classification of image data has been widely used,while nowadays,the traditional classification methods are unable to meet the need of real-time computing.To solve this problem,we propose a parallel online extreme learning machine algorithm.Firstly,with the theory of online extreme learning machine,we calculate the output weight matrix of hidden layer nodes.Secondly,this matrix is partitioned to several matrix blocks based on the characteristics of the MapReduce framework so as to substitute the original large-scale matrix multiplication operation,and the matrix blocks are calculated in different work nodes in parallel.Finally,the values in calculation nodes are merged by the key values and we get the classifier.Under the premise that the original calculation accuracy is guaranteed,we extend the online extreme learning machine algorithm to the MapReduce framework and the classification experiment results on massive image data,taking facial image data as an example,show that the algorithm in this paper can classify massive image data fast and accurately.

同期刊论文项目
同项目期刊论文
期刊信息
  • 《计算机辅助设计与图形学学报》
  • 北大核心期刊(2011版)
  • 主管单位:中国科学技术协会
  • 主办单位:中国计算机学会
  • 主编:鲍虎军
  • 地址:北京2704信箱
  • 邮编:100190
  • 邮箱:jcad@ict.ac.cn
  • 电话:010-62562491
  • 国际标准刊号:ISSN:1003-9775
  • 国内统一刊号:ISSN:11-2925/TP
  • 邮发代号:82-456
  • 获奖情况:
  • 第三届国家期刊奖提名奖
  • 国内外数据库收录:
  • 俄罗斯文摘杂志,荷兰文摘与引文数据库,美国工程索引,英国科学文摘数据库,日本日本科学技术振兴机构数据库,中国中国科技核心期刊,中国北大核心期刊(2004版),中国北大核心期刊(2008版),中国北大核心期刊(2011版),中国北大核心期刊(2014版),中国北大核心期刊(2000版)
  • 被引量:24752