-
题名基于可变长分块的分布式文件系统设计与实现
被引量:4
- 1
-
-
作者
许艳艳
雷迎春
龚奕利
-
机构
武汉大学计算机学院
中国科学院计算技术研究所
-
出处
《计算机工程》
CAS
CSCD
北大核心
2016年第5期80-84,101,共6页
-
基金
国家"863"计划基金资助项目(2013AA12A301)
国家自然科学基金资助项目(61100020)
华为公司创新研究计划基金资助项目
-
文摘
分布式文件系统受传统磁盘文件系统影响,大多使用固定大小的对象或者块来组织和管理文件。定长的分块不适合随机写或插入写,开销大且性能差,但典型的用户约有25%的文件操作是随机写。针对上述现状,提出一种基于内容的可变长文件分块方法,使用拉宾指纹算法对文件进行分块,并根据文件的内容标识文件块。为更准确地指定写类型,提高写性能,给出与POSIX语义兼容的写接口。通过修改Ceph实现一种新的分布式文件系统VarFS,提供文件的可变长分块并支持新的写接口。实验结果表明,由于减少网络数据传输量,VarFS在随机写延迟和带宽消耗量上比Ceph减少了1个~2个数量级。
-
关键词
固定长分块
可变长分块
分布式文件系统
随机写
元数据服务器
-
Keywords
fixed-sized chunk
variable-sized chunk
Distributed File System ( DFS )
random writing
Metadata Server( MDS )
-
分类号
TP391
[自动化与计算机技术—计算机应用技术]
-
-
题名基于GDI的远程屏幕图像实时传输
被引量:2
- 2
-
-
作者
朱国仲
陈海涛
陆桂明
-
机构
华北水利水电学院
-
出处
《华北水利水电学院学报》
2010年第5期113-114,共2页
-
文摘
通过对屏幕进行固定分块,动态获取并按字节比较每块帧间屏幕图像,描述了远程屏幕图像实时传输系统的详细过程和方法,检测出变化区域后进行传输,通过在客户端显示,证明该方法行之有效.
-
关键词
远程屏幕
实时传输
固定分块
帧
-
Keywords
remote screen real-time tranmission fixed blocking frame
-
分类号
TP393.09
[自动化与计算机技术—计算机应用技术]
-
-
题名一种在去重备份系统中数据完整性校验算法
- 3
-
-
作者
韩莹
王茂发
张艳霞
-
机构
防灾科技学院灾害信息工程系
-
出处
《计算机应用研究》
CSCD
北大核心
2015年第6期1819-1821,共3页
-
基金
中央高校基本科研业务费专项资金资助项目(ZY20140215)
-
文摘
在数据备份系统中,使用重复数据删除技术在消除重复数据提高系统存储的空间效率时,将必然会有多个逻辑映像共享去重后的数据实例,如果某个数据实例丢失或者数据被更改,将导致所有引用该实例的逻辑映像均发生错误,因此提出了一种在去重备份系统中数据完整性验证算法。如果当前备份的文件在数据服务器端已经存在数据实例,添加引用之前先对被引用的数据实例进行分块循环顺序校验,判断数据实例的完整性。实验结果证明,这种添加验证码的去重合成备份算法不仅不影响备份速度,而且对备份系统中被引用的数据实例的完整性提供了一种验证的算法。这种数据完整性校验算法提高了去重备份系统的可靠性。
-
关键词
数据去重
数据备份
固定分块
数据完整性校验
-
Keywords
data de-duplication
data backup
fixed block
data integrity verification
-
分类号
TP309.3
[自动化与计算机技术—计算机系统结构]
-