位置:成果数据库 > 期刊 > 期刊详情页
基于声学指纹的海量MP3文件近似去重方法
  • ISSN号:1000-3428
  • 期刊名称:计算机工程
  • 时间:2013.7
  • 页码:73-75
  • 分类:TP311[自动化与计算机技术—计算机软件与理论;自动化与计算机技术—计算机科学与技术]
  • 作者机构:[1]北京科技大学计算机与通信工程学院,北京100083
  • 相关基金:国家自然科学基金资助项目(61070182,61170209)
  • 相关项目:面向下一代互联网的网络服务建模基础理论研究
中文摘要:

在互联网中重复上传他人已经分享的歌曲会消耗网络带宽,浪费存储空间,但目前的重复数据删除方法主要基于文件的二进制特征,无法识别经过信号处理或压缩后的歌曲。针对该问题,提出一种基于声学指纹的海量MP3文件近似去重方法。结合文件消息摘要的确定性与声学指纹的鲁棒性,在采用布隆过滤器对文件消息摘要一次去重的基础上,根据降维后的声学指纹值进行二次近似去重,保证高效的同时提高去重率。实验结果表明,与可变分块检测方法相比,该方法的去重率可提高1倍以上,扩展性较好。

英文摘要:

Song re-uploading bad been shared wastes network bandwidth and storage, which needs to use data de-duplication technology. However, the current approach to de-duplication based file bit-feature does not recognize the same song after signal processing or compression. Aiming at this problem, this paper proposes a near de-duplication method of massive MP3 files based on acoustic fingerprint. It combines the certainty of message digest with the robustness of the acoustic fingerprint, after Bloom Filter(BF) de-duplicate data based on the message digest, then reduces acoustic fingerprint for the secondary near de-duplication based on the dimensionality. It ensures efficient at the same time, greatly improves the de-duplication ratio. Experimental results show that this method can improve the de-duplication rate by one time than Content-defined Chunking(CDC) method, and has good extensibility.

同期刊论文项目
同项目期刊论文
期刊信息
  • 《计算机工程》
  • 北大核心期刊(2014版)
  • 主管单位:中国电子科技集团公司
  • 主办单位:华东计算技术研究所 上海市计算机学会
  • 主编:游小明
  • 地址:上海市桂林路418号
  • 邮编:200233
  • 邮箱:ecice06@ecict.com.cn
  • 电话:021-64846769
  • 国际标准刊号:ISSN:1000-3428
  • 国内统一刊号:ISSN:31-1289/TP
  • 邮发代号:4-310
  • 获奖情况:
  • 1999~2000、2001~2002年度信息产业部优秀期刊奖,2003-2004、2005-2006年度信息产业部电子精品科技...,2007-2008、2009-2010年度工业和信息产业部电子精...,012年度中国科技论文在线优秀期刊一等奖,2013年度中国科技论文在线优秀期刊二等奖
  • 国内外数据库收录:
  • 俄罗斯文摘杂志,美国化学文摘(网络版),波兰哥白尼索引,荷兰文摘与引文数据库,美国剑桥科学文摘,英国科学文摘数据库,日本日本科学技术振兴机构数据库,中国中国科技核心期刊,中国北大核心期刊(2004版),中国北大核心期刊(2008版),中国北大核心期刊(2014版),中国北大核心期刊(2000版)
  • 被引量:84139