位置:成果数据库 > 期刊 > 期刊详情页
面向大数据备份的应用感知并行重删存储系统
  • ISSN号:1000-1239
  • 期刊名称:《计算机研究与发展》
  • 时间:0
  • 分类:TP311[自动化与计算机技术—计算机软件与理论;自动化与计算机技术—计算机科学与技术]
  • 作者机构:[1]解放军理工大学指挥信息系统学院,江苏南京210007, [2]南京陆军指挥学院,江苏南京210045
  • 相关基金:国家863计划资助项目(2012AA01A509,2012AA01A510); 国家自然科学基金资助项目(61402518)
中文摘要:

为减少软件更新中增量包的大小,提出了基于动态字典的增量更新算法DICDIFF。该算法使用后缀排序方法预处理新老版本文件,将预处理的结果以后缀数组和名次数组的形式存储为字典目录,基于该字典目录能够快速查找字典数据集与待编码数据之间的相同数据段。随着编码进度的推进,动态扩展字典数据集能够使用更多已知数据段用于构造待编码数据。通过选取多款软件的新旧版本作为实验样本,DICDIFF在平均情况下能够节省68.9%的网络流量,高于现有其他增量更新算法。实验结果表明,该算法能够进一步减少增量更新过程中的网络流量。

英文摘要:

To reduce the size of delta file for incremental updates,an incremental update algorithm was proposed based on dynamic dictionary named differential compression based on dynamic dictionary(DICDIFF).This algorithm uses the suffix sorting algorithm to preprocess the old and new versions.The pretreatments result in the forms of suffix array and rank array which are stored in the dictionary catalogue.Based on this dictionary catalogue,DICDIFF finds the identical segments between the dictionary data set and the data set to be encoded quickly.With the progress of encoding,DICDIFF is expanding the dictionary data set dynamically.This algorithm gets more segments which could be copied from the dictionary data set to the new version file.Experiments use software from different operating systems as samples,and the average data transmission saving is as high as 69.3%.In comparison with the existing methods,DICDIFF constructs the minimal delta file.The experimental results show that DICDIFF can reduce the network traffic for incremental updates.

同期刊论文项目
同项目期刊论文
期刊信息
  • 《计算机研究与发展》
  • 中国科技核心期刊
  • 主管单位:中国科学院
  • 主办单位:中国科学院计算技术研究所
  • 主编:徐志伟
  • 地址:北京市科学院南路6号中科院计算所
  • 邮编:100190
  • 邮箱:crad@ict.ac.cn
  • 电话:010-62620696 62600350
  • 国际标准刊号:ISSN:1000-1239
  • 国内统一刊号:ISSN:11-1777/TP
  • 邮发代号:2-654
  • 获奖情况:
  • 2001-2007百种中国杰出学术期刊,2008中国精品科...,中国期刊方阵“双效”期刊
  • 国内外数据库收录:
  • 俄罗斯文摘杂志,荷兰文摘与引文数据库,美国工程索引,日本日本科学技术振兴机构数据库,中国中国科技核心期刊,中国北大核心期刊(2004版),中国北大核心期刊(2008版),中国北大核心期刊(2011版),中国北大核心期刊(2014版),中国北大核心期刊(2000版)
  • 被引量:40349