题名 基于对象存储的新型元数据管理策略
被引量：8
1
作者
方圆 杜祝平 周功业
机构
解放军信息工程大学信息工程学院 华中科技大学武汉光电国家实验室
出处
《计算机工程》
CAS
CSCD
2012年第3期25-27,共3页
基金
国家"863"计划基金资助项目(2009AA01A402)
文摘
在对已有对象存储元数据管理策略进行研究的基础上,提出一种基于对象存储的新型元数据管理策略。该策略将命名空间的目录子树分割为等粒度的中子树,将中子树的根目录名和文件名的组合作为哈希参数进行哈希运算,元数据服务器根据其所得哈希值确定存储路径。实验结果表明,该策略在处理元数据重命名操作和修改文件名时,可以避免大量元数据迁移及网络开销问题。
关键词
元数据 对象存储 元数据管理 元数据服务器 负载均衡 热点
Keywords
metadata object storage metadata management Metadata Server（MDS） load balance hot spot
分类号
TP311
[自动化与计算机技术—计算机软件与理论]
题名 分布式文件系统元数据服务的负载均衡框架
被引量：17
2
作者
孙耀 刘杰 叶丹 钟华
机构
中国科学院软件研究所 中国科学院大学
出处
《软件学报》
EI
CSCD
北大核心
2016年第12期3192-3207,共16页
基金
国家自然科学基金(61170074 61202065 +2 种基金 U1435220) 国家高技术研究发展计划(863)(2013AA041301) 国家科技支撑计划(2015BAH18F02)~~
文摘
请求负载均衡,是分布式文件系统元数据管理需要面对的核心问题.以最大化元数据服务器集群吞吐量为目标,在已有元数据管理层之上设计实现了一种分布式缓存框架,专门管理热点元数据,均衡不断变化的负载.与已有的元数据负载均衡架构相比,这种两层的负载均衡架构灵活度更高,对负载的感知能力更强,并且避免了热点元数据重新分布、迁移引起的元数据命名空间结构被破坏的情况.经观察分析,元数据尺寸小、数量大,预取错误元数据带来的代价远远小于预取错误数据带来的代价.针对元数据的以上鲜明特点,提出一种元数据预取策略和基于预取机制的元数据缓存替换算法,加强了上述分布式缓存层的性能,这种两层的元数据负载均衡框架同时考虑了缓存一致性的问题.最后,在一个真实的分布式文件系统中验证了框架及方法的有效性.
关键词
元数据服务器 分布式文件系统 负载均衡 预取 缓存
Keywords
metadata server distributed file system load balancing caching prefetching
分类号
TP316
[自动化与计算机技术—计算机软件与理论]
题名 基于共享存储池的元数据服务器机群的设计研究
被引量：7
3
作者
苏勇 周敬利 余胜生 姜明华 刘钢
机构
华中科技大学计算机科学与技术学院
出处
《小型微型计算机系统》
CSCD
北大核心
2007年第4期734-737,共4页
基金
国家自然科学基金项目(60373088)资助 国家重点实验室项目(51484040504JWO518)资助.
文摘
在大型分布式对象存储系统中,元数据服务系统是一个潜在的访问瓶颈.本文提出一种通过分层式文件系统构建共享存储池的采用两次分布式哈希函数方式的元数据服务系统.其具有不需要人工干预的故障恢复性和易扩展特性,而且最大程度减少了MDS之间大量元数据的物理迁移.实验测试证明系统具有良好的I/O性能.
关键词
元数据服务器 共享存储池 哈希 对象存储
Keywords
metadata server shared storage pool hash object-based storage
分类号
TP393
[自动化与计算机技术—计算机应用技术]
题名 高可靠性元数据服务器研究
被引量：6
4
作者
刘群 冯丹 王芳
机构
华中科技大学网络与计算中心 华中科技大学信息存储系统教育部重点实验室
出处
《计算机工程》
CAS
CSCD
北大核心
2008年第17期88-90,共3页
基金
国家"973"计划基金资助项目"下一代互联网信息存储的组织模式和核心技术研究"(2004CB318201) 华中科技大学校实验技术研究基金资助项目
文摘
基于对象存储的核心是将存储空间管理从存储应用中分离,其中元数据服务器(MDS)负责逻辑视图管理和提供全局命名空间。该文针对MDS的引路导航性能,提出一种主从备三重链式结构,在不增加硬件成本的前提下,能提供无间断的MDS服务,确保了系统的高可靠性。
关键词
元数据服务器 可扩展对象的海量存储系统 高可靠性 主从备链式结构
Keywords
MetaData Server（MDS） Based on Scalable Object Mass Storage System（BSO-MSS） high reliability master/slave/standby chain
分类号
TP393
[自动化与计算机技术—计算机应用技术]
题名 水环境空间信息管理系统的设计和实现
被引量：13
5
作者
张毅 刘瑜 王永乾
机构
北京大学城市与环境学系
出处
《地理学与国土研究》
CSSCI
CSCD
2000年第4期49-53,共5页
基金
国家攻关项目!"CITYSTAR"地理信息系统基础软件开发与商品化"专题资助 (96 -B0 2 - 0 3 - 0 1)
文摘
在分析水环境信息特点的基础上 ,建立了基于Client/Server和GIS的水环境空间信息管理系统 ,重点介绍系统的体系结构、空间数据库及其功能。
关键词
地理信息系统 管理信息系统 空间数据库 水环境
Keywords
GIS MIS Client/Server spatial database metadata|
分类号
X832
[环境科学与工程—环境工程]
P208
[天文地球—地图制图学与地理信息工程]
题名 存储虚拟化系统的元数据副本一致性管理模型
被引量：4
6
作者
贾永洁 金海 易川江 韩宗芬 吴松
机构
华中科技大学计算机学院
出处
《计算机工程与科学》
CSCD
2004年第9期86-88,共3页
基金
国家 8 63计划资助项目 ( 2 0 0 1AA1110 11) 国家杰出青年科学基金资助项目 ( 60 12 5 2 0 8)
文摘
本文提出一种简洁实用的元数据副本一致性管理新模型MRCC ,该模型引入调度器对元数据服务器进行集中管理 ,不仅可以使系统达到更好的扩展性和可用性 ,而且可以灵活地实现对元数据副本的一致性控制 ,更好地发挥元数据副本容错和负载均衡的作用。
关键词
存储虚拟化 MRCC 调度器 元数据服务器 元数据副本
Keywords
storage virtualization metadata server replica consistency scheduler
分类号
TP333
[自动化与计算机技术—计算机系统结构]
题名 空间数据仓库元数据及其实现
被引量：3
7
作者
张友水 阮仁宗 苏勤
机构
南京大学城市与资源学系
出处
《计算机应用》
CSCD
北大核心
2003年第4期102-104,108,共4页
文摘
通过对数据仓库的特征及其元数据机制的分析 ,探讨了分布式运行环境中空间元数据的实现 ,进而论述地理元数据信息提取、查询、更新及网上发布 ,并提出元数据软件的基本构架。最后介绍了空间元数据管理应用实例。
关键词
空间数据仓库 元数据 空间数据库 地理信息系统 联机分析处理 动态服务器主页 客户端/服务器
Keywords
data warehouse metadata online analysis processing active server pages client/server
分类号
TP392
[自动化与计算机技术—计算机应用技术]
P208
[天文地球—地图制图学与地理信息工程]
题名 支持连续数据保护的云备份系统架构设计
被引量：7
8
作者
王欢 李战怀 张晓
机构
西北工业大学计算机学院
出处
《计算机工程与应用》
CSCD
2012年第1期90-93,共4页
基金
国家高技术研究发展计划(863)重大项目(No.2009AA01A404)
文摘
为了解决目前云备份系统恢复目标时间点不连续以及恢复粒度太粗的问题,将连续数据保护技术应用到云备份系统中,提出了一种支持连续数据保护的云备份系统。本系统能够提供秒级的连续恢复时间点,且数据块级别的备份层次能够屏蔽异构平台,具有更广泛的应用前景。系统以私有云为架构基础,部署在防火墙内部,对数据安全有很高的保障。
关键词
连续数据保护 云备份 虚拟化 元数据服务器 重复数据删除 日志卷
Keywords
continuous data protection cloud backup virtualization metadata server deduplication log volume
分类号
TP393
[自动化与计算机技术—计算机应用技术]
题名 集群多媒体存储系统的两级元数据管理
被引量：4
9
作者
万继光 詹玲
机构
华中科技大学计算机科学与技术学院武汉光电国家实验室
出处
《小型微型计算机系统》
CSCD
北大核心
2009年第4期752-756,共5页
基金
国家自然科学基金项目(60603075)资助 国家"九七三"重点基础研究发展计划项目(2004CB318203)资助
文摘
随着网络上多媒体数据的爆炸性增长,对海量可扩展的存储系统的需求也快速增长.CMSS(Cluster Multimedia Storage System)项目采用分布式存储系统结构:一种自治的高性能的基于PC的存储集群系统.CMSS采用两级的元数据服务器结构,通过分离存储数据的逻辑视图与物理视图,全局逻辑视图由专用的全局元数据服务器来管理,局部逻辑视图和物理视图由各个存储服务器上的本地元数据服务器来管理.在详细介绍了CMSS系统两级元数据管理方案的同时,进行了相应的试验测试和性能分析.
关键词
多媒体 集群 存储系统 元数据服务器
Keywords
multimedia cluster storage system metadata server
分类号
TP333
[自动化与计算机技术—计算机系统结构]
题名 海量存储系统中高可扩展性元数据服务器集群设计
被引量：3
10
作者
吴伟 谢长生 韩德志 黄建忠
机构
华中科技大学计算机学院外存储国家重点实验室 暨南大学计算机系
出处
《计算机科学》
CSCD
北大核心
2007年第7期106-109,共4页
基金
国家"973"重大基础研究项目(编号:2004CB318203) 国家自然科学基金项目(编号:60303031)资助
文摘
海量存储系统都采用元数据服务器机群的方式来处理文件系统的元数据信息。很多存储系统采用Hash算法来实现文件元数据在元数据机群内的分布,但是这些算法都是针对文件进行Hash。本文提出了一种目录哈希的新算法,针对目录进行Hash,并把一个目录内的元数据集中存储。本算法克服了文件Hash的不足,改善了存储系统的性能,并极大地提高了存储系统的可扩展性。
关键词
海量存储系统 元数据服务器机群 高可扩展性 目录哈希
Keywords
Mass storage system, Metadata server cluster, High scalability, Directory hash
分类号
TP393.18
[自动化与计算机技术—计算机应用技术]
题名 双机高可用系统设计与性能分析
被引量：3
11
作者
韩德志 傅丰
机构
广东外语外贸大学信息学院 中山大学广东省信息安全重点实验室 中山大学电子与通信工程系 黄淮学院计算机系
出处
《计算机科学》
CSCD
北大核心
2009年第1期55-59,共5页
基金
国家高技术研究发展计划(863)(批准号:2007AA01Z449)资助的课题 国家自然科学基金项目(60673191) +2 种基金 广东省信息安全重点实验室项目 河南省科技计划资助项目(072100451230) 广东外语外贸大学科研创新团队项目(GW2006-AT-005)资助
文摘
针对融合iSCSI,NAS,SAN的海量网络存储系统的特点,设计了一种双机高可用元数据服务器系统,该系统不仅减少了元数据服务器瓶颈,而且可充分保证存储网络系统元数据的高可用性。通过建立连续时间马尔可夫链性能分析模型,分析结果显示双机高可用系统的可用度远优于单机单路径系统。
关键词
双机高可用系统 系统设计 性能分析 存储网络 元数据服务器 马尔可夫模型
Keywords
High availability, Storage network, Metadata server, Markovian chain model
分类号
TP302.7
[自动化与计算机技术—计算机系统结构]
TP393
[自动化与计算机技术—计算机应用技术]
题名 一种集群多媒体存储系统的研究与设计
被引量：2
12
作者
万继光 谢长生
机构
华中科技大学信息存储系统教育部重点实验室
出处
《计算机研究与发展》
EI
CSCD
北大核心
2006年第8期1311-1316,共6页
基金
国家自然科学基金项目(60303031) 国家"九七三"重点基础研究发展规划基金项目(2004CB318203)~~
文摘
随着网络上多媒体数据的爆炸性增长和集群技术的快速发展,设计并实现了一个基于PC集群的高性能集群多媒体存储系统(clustermultimediastoragesystem,CMSS)·CMSS系统采用高自治、自维护的集群策略,提高了系统的并行性和可扩展性;采用逻辑元数据管理技术,即实现了单一名字空间,又避免了单点失效;采用服务器数据备份技术,即提高了系统的数据安全性,也解决了服务器之间的负载平衡·在详细介绍了CMSS系统设计方案的同时,进行了相应的实验测试和性能分析·
关键词
多媒体 集群 存储系统 元数据服务器
Keywords
multimedia cluster storage system metadata server
分类号
TP302
[自动化与计算机技术—计算机系统结构]
题名 使用方正双策略构建农业高校特色数据库的研究
被引量：1
13
作者
张凯 李树霞 朱立红
机构
河北农业大学
出处
《中国农机化学报》
北大核心
2014年第3期332-335,共4页
基金
保定市哲学社会科学规划研究项目(201302035) 河北农业大学社科基金项目(SK201314-1) +1 种基金 河北农业大学社科基金和理工基金项目(SK201207) 河北农业大学非生命学科与新兴学科基金项目(SK2011090)
文摘
对德赛数据加工的"分类法"和Apabi数据资源平台的"元数据"两种策略进行了分析。针对二者各自的特点,探索使用底层的SQL Server开发工具对资源平台的元数据进行库结构的调整,改善了特色数据库的建设。
关键词
元数据 特色数据库 SQL SERVER 库结构
Keywords
metadata characteristic database SQL server library structure
分类号
G254.1
[文化科学—图书馆学]
题名 用于质量管理系统的数据仓库
被引量：3
14
作者
戴剑彬 慕春棣
机构
清华大学
出处
《计算机集成制造系统-CIMS》
EI
CSCD
1998年第3期26-29,共4页
基金
国家CIMS工程技术研究中心基金
文摘
数据仓库就是面向主题的（ＳｕｂｊｅｃｔＯｒｉｅｎｔｅｄ）、集成的、稳定的、时间各异的数据集合，用以支持经营管理中的决策制定过程。基于数据仓库的质量管理系统的任务是采集、存储和处理企业的质量数据，并以此为基础进行质量分析、评价、控制和决策。在本文中，对质量管理系统的数据库／操作数据存储／数据仓库（ＤＢ／ＯＤＳ／ＤＷ）体系结构进行了描述，对数据仓库中的数据进行了粒度划分和分割，建立了数据仓库中的数据模型，并给出了作为数据仓库工作平台的客户机／服务器模式。
关键词
数据仓库 质量管理系统 数据模型 企业
Keywords
Data Warehouse, Operational Data Store, Quality Management System, Granularity, Partition, Data Model, Metadata, Client/Server
分类号
F273.2
[经济管理—企业管理]
题名 集群流媒体文件系统MFS设计与实现
15
作者
庞丽萍 蒙廷友 石柯 程斌 唐维
机构
华中科技大学计算机科学与技术学院
出处
《计算机工程与科学》
CSCD
2005年第6期32-34,共3页
基金
国家863计划资助项目(2002AA1Z2102)
文摘
文章描述了WanLan 集群视频服务器上的集群流媒体文件系统(MFS)的设计与实现。MFS 是一种支持MPEG文件格式的分布式流媒体文件系统,它由MFS的客户端、管理节点、数据节点以及元数据服务节点组成。MFS流媒体集群文件系统实现了单一系统的逻辑映像、数据和元数据的高可用以及系统自动配置。
关键词
集群流媒体服务器 并行文件系统 元数据 高可用 自动配置
Keywords
multimedia server of cluster parallel file system metadata high availability
分类号
TP316
[自动化与计算机技术—计算机软件与理论]
题名 两级元服务器机群文件系统的负载平衡策略
16
作者
田俊峰 宋玮玮 于洪芬
机构
河北大学数学与计算机学院
出处
《计算机工程》
CAS
CSCD
北大核心
2007年第16期77-79,82,共4页
基金
河北省产业化基金资助项目(020501)
文摘
提出了一种两级元数据服务器机群文件系统的负载平衡策略,高级元服务器依据与二级元服务器性能最密切相关的负载信息将任务快速分配,在存储文件时,提出了一种能正确反映各存储节点I/O流量和存储量的方法:计算文件热量值,并据此对待存文件进行了合理的分配存储。实验结果表明,该策略提高了系统的性能,缩短了任务执行时间,取得了较好的效果。
关键词
机群文件系统 元数据服务器 负载平衡 热量值
Keywords
cluster file system metadata-server load-balance value of heat
分类号
TP393
[自动化与计算机技术—计算机应用技术]
题名 小规模集群文件系统中两级元数据服务器的设计与实现
17
作者
田俊峰 于洪芬 宋玮玮
机构
河北大学数学与计算机学院
出处
《小型微型计算机系统》
CSCD
北大核心
2007年第6期1026-1030,共5页
基金
河北省产业化基金项目(020501)资助
文摘
在集群文件系统中,元数据服务器是整个系统正常运转的核心,它的可靠性和性能是设计系统时需要着重考虑的问题之一.本文设计了一个具有高可靠性、高性能的两级元数据服务器系统,兼顾了集中式元数据管理和分布式元数据管理的优点.系统中高级元数据服务器负责维护文件系统全局的目录结构和管理整个文件系统的命名空间,双元数据服务器负责维护文件元数据的分布信息,并采用了马尔可夫回报模型对两级元数据服务器系统进行了可靠性分析.实验数据表明,具有两级元数据服务器的集群文件系统能提供高吞吐量.
关键词
可靠性 两级元数据服务器 马尔可夫回报模型
Keywords
reliability two-level metadata server Markov return model performance
分类号
TP311
[自动化与计算机技术—计算机软件与理论]
题名 一种服务端驱动的无锁的文件元数据操作方法
18
作者
冯振乾 苏金树
机构
国防科技大学计算机学院
出处
《计算机工程与科学》
CSCD
北大核心
2009年第A01期153-156,共4页
基金
国家973计划资助项目(2009CB320503) 国家863计划资助项目(2008AA01A325)
文摘
当前的大规模存储系统提供大量的聚合I/O带宽,但并没有实现高度的元数据扩展性以管理分布于成千上万存储节点之上的文件。本文提出服务端驱动的无锁元数据操作来改进文件元数据操作的扩展性。服务端驱动技术简化了一致性维护,无锁技术既避免了资源冲突,又增进了元数据操作的并行性。实现了文件创建、删除操作。实验结果表明,该方法能显著提高系统的性能和扩展性。
关键词
元数据操作 服务端驱动 无锁 扩展性
Keywords
metadata operation server-driven lock-less scalability
分类号
TP338.8
[自动化与计算机技术—计算机系统结构]
题名 基于SQL的电子资源数据库元数据的开发与设计
19
作者
张凯
机构
河北农业大学图书馆
出处
《河北大学学报（自然科学版）》
CAS
北大核心
2014年第4期443-448,共6页
基金
河北省自然科学基金资助项目(A2014201006)
文摘
根据SAN(storage area network)存储模式的分块理论,以64M作为block分块单位,设计了分块算法的实现.重点研究了使用底层的SQL Server开发工具对数据库资源平台的元数据进行库结构调整.利用apabi元数据的标识找到了与此元数据相对应的SQL表.修改元数据就是对SQL的表进行操作.最后,使用XML语言设计出了形象直观的农业学科书评数据库的元数据信息.
关键词
SAN SQL SERVER 元数据 XML
Keywords
SAN SQL Server metadata XML
分类号
G250.76
[文化科学—图书馆学]
题名 一种面向海量存储系统的高效元数据集群管理方案
被引量：3
20
作者
肖中正 陈宁江 魏峻 张文博
机构
广西大学计算机与电子信息学院 中国科学院软件研究所软件工程技术研究开发中心
出处
《计算机研究与发展》
EI
CSCD
北大核心
2015年第4期929-942,共14页
基金
国家自然科学基金项目(61063012 61363003) +4 种基金 广西自然科学基金项目(2012GXNSFAA053222) 广西高校优秀人才资助计划项目([2011]40) 广西科学研究与技术开发计划项目(桂科软13180015 桂科攻1348020-7) 南宁市科学研究与技术开发计划项目(201109016A)
文摘
高效的、去中心化的元数据管理方案对大型分布式存储系统的可靠性、可扩展性起至关重要的作用.针对基于Hash划分和基于子树划分的元数据管理方案扩展代价巨大、对集群变动敏感等问题,提出一种基于一致性Hash结构的元数据服务器(metadata server,MDS)集群化方案——CH-MMS(consistent Hash based metadata management schema).CH-MMS在一致性MDS集群上引入虚拟MDS(Virtual MDS),有效平衡MDS集群负载;将Standby机制与延迟更新策略融合并应用于MDS集群,实现MDS快速失效恢复以及集群变动时零数据迁移量.阐述了CH-MMS的体系结构,介绍了核心数据结构layout-table、虚拟MDS结构、延迟更新机制及相关算法,并对CH-MMS扩展性、容错性作了定性分析.最后通过原型系统和模拟实验说明,CH-MMS具有元数据平衡分布、快速失效恢复、灵活的扩展性以及零结点变动数据迁移量等特点,能满足数据量不断增加的大规模存储集群元数据灵活、高效管理的需求.
关键词
元数据管理 一致性Hash 大数据存储 元数据服务器 分布式文件系统
Keywords
metadata management consistent Hash large-scale data storage metadata server（MDS） distributed file system
分类号
TP391
[自动化与计算机技术—计算机应用技术]
