位置:成果数据库 > 期刊 > 期刊详情页
基于时间序列的Global Skyline并行算法
  • ISSN号:1001-506X
  • 期刊名称:《系统工程与电子技术》
  • 分类:TP311[自动化与计算机技术—计算机软件与理论;自动化与计算机技术—计算机科学与技术]
  • 作者机构:[1]大连海事大学信息科学技术学院,辽宁大连116026, [2]大连交通大学软件学院,辽宁大连116028, [3]大连大学物理科学与技术学院,辽宁大连116622, [4]大连海洋大学信息工程学院,辽宁大连116023
  • 相关基金:国家自然科学基金(61173165,61300187,61370198,61370199,U1433124); 中央高校基本科研业务费专项资金(31322013044,31322013029,3132014325,3132013335); 辽宁省教育厅科学研究一般项目(L2015092,L2014492,L2014283,L2014191); 江苏省未来网络创新研究院未来网络前瞻性研究项目资助课题
中文摘要:

Global Skyline查询是Skyline查询的一种变种,它和动态Skyline查询、反Skyline查询关系密切,已被广泛应用于多目标决策、网络监控、数据挖掘等方面。随着数据的积累,传统集中式的Skyline查询已经不能满足大数据的处理要求。为了高效解决大规模的基于时间序列的数据处理难题,提出了基于MapReduce框架并行的Global Skyline Cell查询算法。首先,通过对实际应用需求进行分析,本文提出了基于时间序列数据Skyline查询的时间倒排索引模型;并提出了Global Skyline格概念,利用格间的支配关系进行粗粒度高效剪枝,避免了大部分的无效运算;其次查询点将数据空间分割成不同象限,基于各象限进行轮询,实现了Global Skyline格的查询,在此候选结果中得到Global Skyline点,为下一步实现动态Skyline和反Skyline查询奠定基础。最后,我们在Hadoop集群环境中实现了该算法。实验结果表明,该算法能有效解决基于时间序列的大规模数据Skyline查询的时间和空间矛盾,能够满足实际应用需求。

英文摘要:

Global Skyline query is a variant of the Skyline query which has been used for multiple objective decision making,business planning,network monitoring and data mining etc.The result set of Global Skyline query is close to the ones of dynamic Skyline query and reverse Skyline query.With the number of historical data increases,Skyline query on centralized system is not competent for big data and Skyline query for large-scale data on time series is a challenge.A parallel algorithm of Global Skyline on time series is proposed.Firstly,we present a inverted index based on data on time series.Secondly,we provide the concept of Global Skyline cell which can eliminate the dominated cells according to the cell dominance relationship.The coarse grained pruning strategy can help to avoid a lot of meaningless computation.The query point divides the data space into the four quadrants,Global Skyline query can be executed in eachquadrant circularly.Lastly through extensive experiments with both real-world and synthetic datasets,we show that our algorithm is much more efficient for big data on time series.

同期刊论文项目
期刊论文 15 会议论文 16
同项目期刊论文
期刊信息
  • 《系统工程与电子技术》
  • 北大核心期刊(2011版)
  • 主管单位:中国航天科工集团公司
  • 主办单位:中国航天科工防御技术研究院 中国宇航学会 中国系统工程学会
  • 主编:施荣
  • 地址:北京142信箱32分箱
  • 邮编:100854
  • 邮箱:xtgcydzjs@126.com
  • 电话:010-68388406
  • 国际标准刊号:ISSN:1001-506X
  • 国内统一刊号:ISSN:11-2422/TN
  • 邮发代号:82-269
  • 获奖情况:
  • 全国中文核心期刊,全国优秀科技期刊,中国科技论文统计用刊,中国期刊方阵“双百”期刊
  • 国内外数据库收录:
  • 德国数学文摘,荷兰文摘与引文数据库,美国工程索引,美国剑桥科学文摘,英国科学文摘数据库,日本日本科学技术振兴机构数据库,中国中国科技核心期刊,中国北大核心期刊(2004版),中国北大核心期刊(2008版),中国北大核心期刊(2011版),中国北大核心期刊(2014版),中国北大核心期刊(2000版)
  • 被引量:34341