位置:成果数据库 > 期刊 > 期刊详情页
基于Hadoop的分布式CIF四叉树索引方法
  • ISSN号:1006-2475
  • 期刊名称:《计算机与现代化》
  • 时间:0
  • 分类:TP301.6[自动化与计算机技术—计算机系统结构;自动化与计算机技术—计算机科学与技术]
  • 作者机构:[1]河海大学计算机与信息学院,江苏南京211100, [2]中国电子科技集团公司第二十八研究所,江苏南京210007
  • 相关基金:国家自然科学基金面上项目(61370091);国家科技支撑计划项目(2015BAB07800)
中文摘要:

针对矩形空间数据对象,以传统CIF四叉树索引技术为基础,利用Hadoop平台与Map Reduce并行编程模型,采用“分而治之”的思想,对数据空间进行划分,设计适用于分布式环境的创建索引、相交查询、区域删除的并行算法。在此基础上,通过改变数据集中矩形对象的数目与map数进行实验,分析并行创建与相交查询的效率。实验结果表明,对于大数据量的数据集与多数据集,并行创建与查询可以提高处理效率。

英文摘要:

We design some algorithms about parallel index creation, intersection query and regional remove for the rectangle ob- jects, which are suitable for the distributed environment. These algorithms rely on the methods of dividing the data space, as well as the idea of divide-and-conquer. And they are based on the CIF indexing techniques supported by the Hadoop platform and the MapReduce programming model. On this basis, we test the parallel index creation and intersection queries's efficiency by chan- ging the size of data sets of rectangle objects and the number of the map tasks. The experiments results show that using parallel al- gorithms of the parallel index creation and intersection queries can improve the processing efficiency for large data sets.

同期刊论文项目
同项目期刊论文
期刊信息
  • 《计算机与现代化》
  • 中国科技核心期刊
  • 主管单位:江西省科学技术厅
  • 主办单位:江西省计算机学会 江西省计算技术研究所
  • 主编:刘波平
  • 地址:南昌市西湖区井冈山大道1416号8楼
  • 邮编:330003
  • 邮箱:jgsdd@163.com
  • 电话:0791-86490996
  • 国际标准刊号:ISSN:1006-2475
  • 国内统一刊号:ISSN:36-1137/TP
  • 邮发代号:44-121
  • 获奖情况:
  • 中国科技核心期刊 中国科技论文统计源期刊 江西省...
  • 国内外数据库收录:
  • 波兰哥白尼索引,中国中国科技核心期刊
  • 被引量:14808