-
题名一种批处理块级数据去重方法
被引量:5
- 1
-
-
作者
杨天明
吴海涛
-
机构
黄淮学院国际学院
-
出处
《计算机应用与软件》
CSCD
2016年第5期44-46,60,共4页
-
基金
河南省科技项目(142300410288
132400411178)
河南省教育厅科学技术研究重点项目(112102210446)
-
文摘
数据去重能消除备份中的冗余数据,节省存储资源和网络带宽,因而成为当前数据存储领域的研究热点。针对常用的块级数据去重技术指纹查询开销高、系统吞吐率低等问题,提出一种批处理块级数据去重方法,通过内存缓冲区对指纹进行排序,实现磁盘索引的顺序查询。同时文件以一种双指针有向无环图的结构存储在系统中,以消除文件读时引起的随机磁盘I/O开销。实验结果表明,该方法有效克服了指纹查询的磁盘I/O瓶颈,提高了数据去重时的系统读写性能。
-
关键词
备份
数据去重
指纹查询
批处理
-
Keywords
Backup
Data de-duplication
Fingerprint query
Batch process
-
分类号
TP333
[自动化与计算机技术—计算机系统结构]
-