网络存储系统中I/O请求响应时间的研究 被引量：16

1

作者 曹强 谢长生 《计算机研究与发展》 EI CSCD 北大核心 2003年第8期1271-1276,共6页

网络存储技术从很多方面改善了传统基于主机的存储系统的不足 ,但由于在数据存储和处理之间增加了网络 ,对整个I/O请求过程产生很大的影响 ,使得I/O性能难以准确地估计 通过对两种常用的网络存储系统———NAS和SAN的基本存储过程进行... 网络存储技术从很多方面改善了传统基于主机的存储系统的不足 ,但由于在数据存储和处理之间增加了网络 ,对整个I/O请求过程产生很大的影响 ,使得I/O性能难以准确地估计 通过对两种常用的网络存储系统———NAS和SAN的基本存储过程进行分析 ,提出了针对网络存储系统中I/O响应时间的性能评估模型 通过实验 ,发现这个模型在很大程度上能够对存储网络的性能进行评价 结果表明存储网络的性能不光和存储设备以及网络设备的物理性质有关 ,还和具体的负载状况密切联系 另一方面 ,FC(光纤通道 )对负载状况的依赖性远远小于TCP/IP网络 ,就I/O响应速度而言 ,FC有更好的性能 . 展开更多

关键词 网络存储 I/O请求 平均响应时间 排队论

在线阅读 下载PDF 职称材料

一种高可用对象存储系统的数据组织研究 被引量：3

2

作者 詹玲 张强善 万继光 《计算机科学》 CSCD 北大核心 2009年第11期123-126,130,共5页

通过对现有不同存储系统的容错能力进行认真分析,提出了一种新的高可用对象存储系统架构HAOSS(High Availability Object Storage System)。HAOSS系统分两层:上层存储的对象采用在多个设备之间的数据备份的方式来实现高可靠性,多个备份... 通过对现有不同存储系统的容错能力进行认真分析,提出了一种新的高可用对象存储系统架构HAOSS(High Availability Object Storage System)。HAOSS系统分两层:上层存储的对象采用在多个设备之间的数据备份的方式来实现高可靠性,多个备份能够同时对外提供服务,保证系统的高性能,但是磁盘利用率比较低。下层采用RAID5,RAID6以及RAID_Blaum等不同的容错编码来实现多盘容错功能,磁盘利用率较高,但是由于编码越来越复杂,容错编码需要大量的计算,性能受到很大的影响。在数据组织上,新对象和热点对象放上层,这样大部分请求都能够在上层命中,从而保证系统的性能。下层主要用来放不常用的数据,磁盘利用率比较高。在1000Mbps以太网环境下对HAOSS性能进行了测试,结果表明,HAOSS顺序读写性能都比较好,最大可以达到104MB/s,达到1000Mb以太网的理论最大物理带宽。 展开更多

关键词 数据组织 高可用 对象存储 容错

在线阅读 下载PDF 职称材料

基于对象的进化存储系统研究 被引量：1

3

作者 董晓明 谢长生 《计算机科学》 CSCD 北大核心 2005年第11期223-226,共4页

存储管理的成本目前已经超过了硬件成本。本文给出了一种新的存储结构,其中包含了自动化管理的功能以简化存储管理。进化存储系统的概念是指实现动态平衡和优化的基于磁盘的存储,其失效部件将会被热备份部件立即更换(物理进化),其数据... 存储管理的成本目前已经超过了硬件成本。本文给出了一种新的存储结构,其中包含了自动化管理的功能以简化存储管理。进化存储系统的概念是指实现动态平衡和优化的基于磁盘的存储,其失效部件将会被热备份部件立即更换(物理进化),其数据布局和分布会根据新部件的特性进行自动重组(逻辑进化)。同时,我们还描述了称为SMAR的实现分散进化存储系统的目标和可行技术方案,包括自安全、自维护、自适应、自恢复和自测试。我们认为进化存储系统应该是基于对象的,通过智能存储设备达到更好的可用性和可维护性。 展开更多

关键词 磁盘 进化存储系统 自适应 对象存储 存储管理 基于对象 进化 系统研究 自动化管理 存储系统

在线阅读 下载PDF 职称材料

对象存储系统中对象查找及标识符分配管理策略

4

作者 刘景宁 吕满 +1 位作者 童薇 冯丹 《小型微型计算机系统》 CSCD 北大核心 2009年第9期1877-1881,共5页

对象存储系统是一种新的网络存储体系结构,它结合了存储区域网SAN的高性能和网络附加存储NAS的跨平台的优点.对象存储系统的对象查找的快慢直接影响系统的性能.针对对象存储系统的对象查找是通过对象ID找到对象Onode.分析研究了对象文... 对象存储系统是一种新的网络存储体系结构,它结合了存储区域网SAN的高性能和网络附加存储NAS的跨平台的优点.对象存储系统的对象查找的快慢直接影响系统的性能.针对对象存储系统的对象查找是通过对象ID找到对象Onode.分析研究了对象文件系统中的对象查找策略及对象号分配策略,提出元数据服务器与对象设备协同管理对象ID,采用连续的对象号分配策略改进对象存储系统的对象查找方法,提高了对象存储系统的对象查找速度. 展开更多

关键词 对象存储系统 对象查找 对象标识符 对象文件系统 存储管理

在线阅读 下载PDF 职称材料

逻辑进化存储系统的数据分布

5

作者 李怀阳 谢长生 +1 位作者 刘艳 曹强 《小型微型计算机系统》 CSCD 北大核心 2006年第11期2161-2166,共6页

针对现有存储系统不能很好的动态适应工作负载变化情况,本文提出了逻辑进化存储系统的概念,由此设计了一种适合不同磁盘阵列(RAID)之间动态转换的数据分布策略.根据这种策略推导出RAID在同步工作负载情况下的平均响应时间公式,计算出不... 针对现有存储系统不能很好的动态适应工作负载变化情况,本文提出了逻辑进化存储系统的概念,由此设计了一种适合不同磁盘阵列(RAID)之间动态转换的数据分布策略.根据这种策略推导出RAID在同步工作负载情况下的平均响应时间公式,计算出不同RAID级别在各种工作负载情况下的转换门限.为了提供最佳的服务特性,本文还提出根据数据访问的特征自动调节条带单元大小(SUS:StripeUnitSize)的策略,并推导出磁盘阵列在不同工作负载情况下的最优SUS.最后,通过大量的实验验证了本文的分析结果. 展开更多

关键词 逻辑进化 RAID 数据分布 条带单元大小

在线阅读 下载PDF 职称材料

对象存储系统中属性管理方法研究与实现 被引量：1

6

作者 谢黎明 冯丹 覃灵军 《计算机研究与发展》 EI CSCD 北大核心 2007年第z1期115-121,共7页

在对象存储系统中,对象属性用于描述数据特征以及安全策略.系统性能的改善可以通过对象属性的合理管理来实现.目前,属性存放在固定大小的数据结构中,这与属性的可扩展性相违背.针对现有对象属性放置与管理方法的不足,提出了对象属性基... 在对象存储系统中,对象属性用于描述数据特征以及安全策略.系统性能的改善可以通过对象属性的合理管理来实现.目前,属性存放在固定大小的数据结构中,这与属性的可扩展性相违背.针对现有对象属性放置与管理方法的不足,提出了对象属性基于扩展Hash的管理方法,以及属性的放置策略、缓冲策略.通过分析仿真测试的结果,发现在处理大量属性操作时,对象文件系统性能退化很严重.但是,用扩展Hash方法进行属性管理时,系统性能不退化,比对象文件系统更具优势. 展开更多

关键词 基于对象存储系统 基于对象存储设备 对象属性 扩展Hash

在线阅读 下载PDF 职称材料

存储区域网(SAN)中存储虚拟化的研究与实现 被引量：10

7

作者 谢长生 高巍 《计算机应用研究》 CSCD 北大核心 2003年第8期130-132,共3页

网络上的数字信息呈爆炸性增长,SAN(StorageAreaNetwork,存储区域网)越来越多地在企业级存储中得到应用。SAN的虚拟化是存储系统的发展趋势,它在文件系统层实现。SAN虚拟化的目的就是让用户和应用系统把SAN作为一个单一的资源池来存取... 网络上的数字信息呈爆炸性增长,SAN(StorageAreaNetwork,存储区域网)越来越多地在企业级存储中得到应用。SAN的虚拟化是存储系统的发展趋势,它在文件系统层实现。SAN虚拟化的目的就是让用户和应用系统把SAN作为一个单一的资源池来存取和控制。通过对目前几种SAN的存储虚拟化技术的对比,分析了存储虚拟化的技术关键,并给出了一种基于网络的SAN存储虚拟化的实现方案。 展开更多

关键词 存储区域网 虚拟化 存储域控制器

在线阅读 下载PDF 职称材料

一种集群NAS网络备份系统的研究与实现 被引量：6

8

作者 万继光 詹玲 《小型微型计算机系统》 CSCD 北大核心 2005年第6期905-908,共4页

随着数据安全性越来越受到重视,在设计一个分散服务集中管理的NAS集群系统的基础上,设计并实现了一个集群NAS网络备份系统,通过详细介绍这个系统的整体设计方案,着重介绍了针对性设计的NBP(NetworkBackupProtect)协议,并进行了相应的试... 随着数据安全性越来越受到重视,在设计一个分散服务集中管理的NAS集群系统的基础上,设计并实现了一个集群NAS网络备份系统,通过详细介绍这个系统的整体设计方案,着重介绍了针对性设计的NBP(NetworkBackupProtect)协议,并进行了相应的试验测试和性能分析. 展开更多

关键词 附网存储(NAS) 集群 网络备份

在线阅读 下载PDF 职称材料

网络存储I/O流水机制研究 被引量：2

9

作者 曾令仿 冯丹 +1 位作者 周可 王芳 《小型微型计算机系统》 CSCD 北大核心 2006年第1期42-45,共4页

将I/O请求处理划分为多个阶段,为流水线技术引入网络存储提供了新思路.同时,I/O请求处理的各阶段必定通过缓存(内存)来传递或处理数据.I/O请求处理除了直通方式外,大部分依赖存储转发方式(例如对I/O命令的聚散、排队操作等),存储转发的... 将I/O请求处理划分为多个阶段,为流水线技术引入网络存储提供了新思路.同时,I/O请求处理的各阶段必定通过缓存(内存)来传递或处理数据.I/O请求处理除了直通方式外,大部分依赖存储转发方式(例如对I/O命令的聚散、排队操作等),存储转发的方式下的网络存储I/O流水线具有一些新的特点及其自身特有的制约因素.探讨I/O流水机制,对提高网络存储系统整体性能,具有一定的指导及实践意义. 展开更多

关键词 网络存储 I/O流水线 I/O瓶颈

在线阅读 下载PDF 职称材料

基于网络备份系统的SFTP性能优化分析与实现 被引量：5

10

作者 谢长生 李晓钰 《计算机工程与科学》 CSCD 2003年第5期1-4,9,共5页

本文提出了一种改善网络备份系统中小文件传输性能的机制。它借鉴磁盘缓存技术,通过重用文件传输中的数据连接,减少 C/S双方协商的次数,大大提高了网络的吞吐率和文件传输的响应时间。文中分析了原有FTP的性能,进而提出SFTP的设计思想,... 本文提出了一种改善网络备份系统中小文件传输性能的机制。它借鉴磁盘缓存技术,通过重用文件传输中的数据连接,减少 C/S双方协商的次数,大大提高了网络的吞吐率和文件传输的响应时间。文中分析了原有FTP的性能,进而提出SFTP的设计思想,并阐述了它的具体实现机制和方法。测试结果表明,优化后的系统性能有较大的提高。 展开更多

关键词 互联网 网络带宽 网络备份系统 SFTP 性能优化分析 信息资源

在线阅读 下载PDF 职称材料

多媒体网络文件系统的Cache算法设计与实现 被引量：1

11

作者 詹玲 彭海云 万继光 《小型微型计算机系统》 CSCD 北大核心 2009年第9期1873-1876,共4页

通过分析多媒体文件存储和文件访问的特点,在TCP/IP协议和本地文件系统的基础上,针对多媒体应用设计一种高性能的多媒体网络文件系统MNFS(Multimedia Network File System).MNFS采用目录和文件数据两级Cache组织结构,便于Cache的维护和... 通过分析多媒体文件存储和文件访问的特点,在TCP/IP协议和本地文件系统的基础上,针对多媒体应用设计一种高性能的多媒体网络文件系统MNFS(Multimedia Network File System).MNFS采用目录和文件数据两级Cache组织结构,便于Cache的维护和快速查询;为了提高系统性能,采用顺序优化的Cache预测算法;Cache的替换算法采用常用的LRU(Least Re-cently Used)算法,分别将目录Cache和文件数据Cache组织成不同的LRU链表.在以太网环境下对MNFS性能进行了测试,测试结果表明,MNFS随机读的性能同SMB(Server Message Block Protocol)相接近,而MNFS顺序读的性能要比SMB高10-20%左右. 展开更多

关键词 网络文件系统 多媒体 缓存 替换算法

在线阅读 下载PDF 职称材料

基于IPv6存储集群网络模块的设计与实现 被引量：1

12

作者 曹强 罗怡 +1 位作者 谢长生 张常军 《江南大学学报（自然科学版）》 CAS 2007年第4期379-382,共4页

将基于对象的分布式文件系统Lustre存储集群网络模块,由仅支持IPv4改进为同时支持IPv4与IPv6双协议栈,并提出了相应的设计原则与实现方法;测试比较了IPv6与IPv4环境下的系统性能.实验表明,移植前后性能基本相同.考虑到设计的前提是适用L... 将基于对象的分布式文件系统Lustre存储集群网络模块,由仅支持IPv4改进为同时支持IPv4与IPv6双协议栈,并提出了相应的设计原则与实现方法;测试比较了IPv6与IPv4环境下的系统性能.实验表明,移植前后性能基本相同.考虑到设计的前提是适用Linux系统基本的双协议栈架构,因此本方法适用于其他需要支持双协议栈的网络程序. 展开更多

关键词 双IP协议栈 套接字 存储集群

在线阅读 下载PDF 职称材料

基于VIA的存储局域网的设计与研究 被引量：1

13

作者 陈俭喜 冯丹 张江陵 《小型微型计算机系统》 CSCD 北大核心 2005年第9期1487-1490,共4页

存储局域网(StorageAreaNetwork,SAN)以其自身的优势越来越多的应用在企业数据存储领域.目前主流的SAN包括采用FC(FibreChannel)协议的FCSAN与采用IP(InternetProtocol)协议的IPSAN.FCSAN存在价格昂贵,互操作性差等不足;IPSAN虽然价格低... 存储局域网(StorageAreaNetwork,SAN)以其自身的优势越来越多的应用在企业数据存储领域.目前主流的SAN包括采用FC(FibreChannel)协议的FCSAN与采用IP(InternetProtocol)协议的IPSAN.FCSAN存在价格昂贵,互操作性差等不足;IPSAN虽然价格低廉,但IP协议本身并不适合于传输存储I/O数据.为了克服这些不足,本文探讨了一种用VIA(VirtualInterfaceArchitecture)协议替代IP协议的VIA-SAN,并通过实验分析比较了VIA协议相对于IP协议的性能优势. 展开更多

关键词 储局域网 虚拟接口体系结构 TCP/IP 块设备

在线阅读 下载PDF 职称材料

NAS集群中单一系统映像的关键技术 被引量：1

14

作者 鲁宏伟 李悦 《计算机应用研究》 CSCD 北大核心 2003年第7期108-109,112,共3页

NAS(NetworkAttachedStorage)和SAN(StorageAreaNetwork)是目前数据存储领域的主流技术,但都存在缺陷。介绍了构建NAS集群的设想和动向,并就其单一系统映像的关键技术进行了探讨。

关键词 NAS集群 单一系统映像 单一I/O空间

在线阅读 下载PDF 职称材料

一种基于IP网络的统一对象存储访问模型的研究

15

作者 刘群 冯丹 +1 位作者 覃灵军 曾令仿 《计算机科学》 CSCD 北大核心 2006年第8期86-88,共3页

随着计算机应用的普及和存储需求的膨胀,存储系统正在由NAS和SAN转向了OBS。本文介绍了三种存储系统的访问模式,在OBS基础上,提出了存储设备对象,这不仅丰富了对象的内涵,还总结出一种统一对象存储访问模型,对不同存储对象设备实行访问... 随着计算机应用的普及和存储需求的膨胀,存储系统正在由NAS和SAN转向了OBS。本文介绍了三种存储系统的访问模式,在OBS基础上,提出了存储设备对象,这不仅丰富了对象的内涵,还总结出一种统一对象存储访问模型,对不同存储对象设备实行访问协议的映射,使之更具有普适性。 展开更多

关键词 基于对象存储 存储设备对象 统一对象 存储访问模型

在线阅读 下载PDF 职称材料

DVR网络文件系统的设计与实现

16

作者 詹玲 王兵 《小型微型计算机系统》 CSCD 北大核心 2008年第9期1684-1687,共4页

随着多媒体技术和网络技术的快速发展,融合数字录像、DVD播放、视频点播和网络共享等功能的DVD录像机(DVD Recorder:DVR)正成为新的研究热点,DVR网络信息共享也越来越受到人们的重视.通过分析DVR文件存储和文件访问的特点,在现有的TCP/I... 随着多媒体技术和网络技术的快速发展,融合数字录像、DVD播放、视频点播和网络共享等功能的DVD录像机(DVD Recorder:DVR)正成为新的研究热点,DVR网络信息共享也越来越受到人们的重视.通过分析DVR文件存储和文件访问的特点,在现有的TCP/IP协议和FAT32文件系统的基础上,针对DVR设计了一种高性能的DVR网络文件系统DNFS(DVR Net-work File System).在百兆以太网环境下对DNFS性能进行了测试,测试结果表明,DNFS随机读的性能同SMB(Server Mes-sage Block Protocol)相接近,而DNFS顺序读的性能要比SMB高10-20%左右. 展开更多

关键词 DVD录像机 网络文件系统 多媒体

在线阅读 下载PDF 职称材料

一种对象存储设备中自适应动态预取策略 被引量：1

17

作者 龚玮 冯丹 覃灵军 《计算机应用研究》 CSCD 北大核心 2006年第10期54-56,共3页

在对象存储系统中,对象存储设备具有很高的智能和处理能力,它负责对象及其属性的数据组织和管理,向外提供基于对象的访问接口。每个对象均具有属性,它反映了对象的某些特征。通过为每个对象自定义一个预取属性页,对用户访问对象存储设... 在对象存储系统中,对象存储设备具有很高的智能和处理能力,它负责对象及其属性的数据组织和管理,向外提供基于对象的访问接口。每个对象均具有属性,它反映了对象的某些特征。通过为每个对象自定义一个预取属性页,对用户访问对象存储设备的规律进行智能的自我学习,从而实现一种高效的、自适应的动态预取算法,可以提高对象存储设备的预取命中率,从而提高对象存储设备的性能。 展开更多

关键词 对象存储设备 对象属性 自适应预取

在线阅读 下载PDF 职称材料

多级集群文件系统的全局命名空间的设计与实现

18

作者 封仲淹 万继光 +1 位作者 李锡武 李旭 《计算机工程》 EI CAS CSCD 北大核心 2006年第21期67-69,72,共4页

随着存储数据的爆炸性增长和集群技术的快速发展,集群文件系统的研究越来越成为一个焦点,该文设计并实现了一个多级集群文件系统(MCFS)的全局命名空间,MCFS系统采用元数据分层管理思想,建立一个统一的元数据树,从而使整个系统运行在一... 随着存储数据的爆炸性增长和集群技术的快速发展,集群文件系统的研究越来越成为一个焦点,该文设计并实现了一个多级集群文件系统(MCFS)的全局命名空间,MCFS系统采用元数据分层管理思想,建立一个统一的元数据树,从而使整个系统运行在一个松耦合、异构的环境下实现全局命名空间,提高了系统的并行性和可扩展性。在介绍了MCFS命名空间管理的同时,进行了相应的试验测试和性能分析。 展开更多

关键词 并行文件系统 分布文件系统 多级集群文件系统 全局命名空间 元数据树

在线阅读 下载PDF 职称材料

一种基于iSCSI的SAN的研究与实现 被引量：31

19

作者 谢长生 傅湘林 +1 位作者 韩德志 任劲 《计算机研究与发展》 EI CSCD 北大核心 2003年第5期746-751,共6页

网络上的数字信息呈爆炸性增长存储区域网 (storageareanetwork ,SAN)越来越多的在企业级存储中得到应用 ,目前SAN的主流技术采用FibreChannel(FC)协议 它性能高、可扩展性好 ,但也存在价格高、互操作差和管理等方面诸多的不足 ,阻碍了... 网络上的数字信息呈爆炸性增长存储区域网 (storageareanetwork ,SAN)越来越多的在企业级存储中得到应用 ,目前SAN的主流技术采用FibreChannel(FC)协议 它性能高、可扩展性好 ,但也存在价格高、互操作差和管理等方面诸多的不足 ,阻碍了它进一步的应用和普及 ,为了克服这些不足 ,人们开始探索新的SAN互联技术 通过对iSCSI和传统的FibreChannel互联技术较深入的对比 ,分析了iSCSI的技术关键 。 展开更多

关键词 存储区域网 网络互联 光纤通道协议 ISCSI

在线阅读 下载PDF 职称材料

磁盘阵列控制器的设计与原型实现 被引量：8

20

作者 谢长生 董晓明 +2 位作者 万继光 谭志虎 刘瑞芳 《小型微型计算机系统》 CSCD 北大核心 2006年第1期171-174,共4页

大规模存储服务的需求在快速增长.冗余磁盘阵列(RAID)是今天企业级存储系统的标准解决方案.介绍了一个基于Intel80321平台的RAID控制器的设计.在目标板上运行了嵌入式Linux系统,并实现了基于x86平台的原型系统,以光纤通道接口连接主机.... 大规模存储服务的需求在快速增长.冗余磁盘阵列(RAID)是今天企业级存储系统的标准解决方案.介绍了一个基于Intel80321平台的RAID控制器的设计.在目标板上运行了嵌入式Linux系统,并实现了基于x86平台的原型系统,以光纤通道接口连接主机.性能测试显示RAID-5的读、写数据传输率分别达到185MB/s和141MB/s. 展开更多

关键词 磁盘阵列 控制器 LINUX IOP321

在线阅读 下载PDF 职称材料