关系数据库中实时高效元数据存储算法优化研究 被引量：15

1

作者 刘帆 《科学技术与工程》 北大核心 2017年第17期255-260,共6页

当前关系数据库中元数据存储算法不仅所需存储空间大,而且均衡性和稳定性差,读写效率低下。为此,提出一种新的关系数据库中实时高效元数据存储算法。通过基于优先级的蛇形时隙算法,对关系数据库中的元数据进行存储;通过分割网格区域把... 当前关系数据库中元数据存储算法不仅所需存储空间大,而且均衡性和稳定性差,读写效率低下。为此,提出一种新的关系数据库中实时高效元数据存储算法。通过基于优先级的蛇形时隙算法,对关系数据库中的元数据进行存储;通过分割网格区域把关系数据库中某一类型的元数据存储于对应的网格中,把优先级高的元数据存储于和查询节点较近的区域,使得高优先级元数据最先被搜索。针对优先级蛇形时隙算法未考虑元数据存储时缓存因素、缺乏针对元数据访问局部性优化机制的弊端,引入元素存储生存期对其进行改进,以提高元数据存储算法的实时高效性。实验结果表明,所提算法的分布均衡度和稳定性很高,而且存储空间小,读写性能优。 展开更多

关键词 关系数据库 实时高效 元数据存储

在线阅读 下载PDF 职称材料

基于SSD的机群文件系统元数据存储系统 被引量：8

2

作者 陈卓 熊劲 马灿 《计算机研究与发展》 EI CSCD 北大核心 2012年第S1期269-275,共7页

随着数据量的增加和元数据操作性能需求的提高,传统基于磁盘(HDD)存储架构的机群文件系统元数据存储系统由于HDD成为性能瓶颈而无法满足需求.将SSD应用到元数据存储中,设计实现了一个基于SSD+HDD的异构元数据存储系统Hybrid MDSL.针对SS... 随着数据量的增加和元数据操作性能需求的提高,传统基于磁盘(HDD)存储架构的机群文件系统元数据存储系统由于HDD成为性能瓶颈而无法满足需求.将SSD应用到元数据存储中,设计实现了一个基于SSD+HDD的异构元数据存储系统Hybrid MDSL.针对SSD的I/O特性设计了基于追加写的元数据存储组织,并通过基于访问热度的数据迁移机制提高SSD空间利用率.测试结果表明,Hybrid MDSL明显提高了元数据I/O的性能. 展开更多

关键词 机群文件系统 SSD 元数据存储系统 数据热度

在线阅读 下载PDF 职称材料

SQL-DFS:一种基于HDFS的海量小文件存储系统 被引量：7

3

作者 马志强 杨双涛 +1 位作者 闫瑞 张泽广 《北京工业大学学报》 CAS CSCD 北大核心 2016年第1期134-141,共8页

针对Hadoop分布式文件系统(Hadoop distributed file system,HDFS)进行小文件存储时Name Node内存占用率高的问题,通过分析HDFS基础架构,提出了基于元数据存储集群的SQL-DFS文件系统.通过在Name Node中加入小文件处理模块实现了小文件... 针对Hadoop分布式文件系统(Hadoop distributed file system,HDFS)进行小文件存储时Name Node内存占用率高的问题,通过分析HDFS基础架构,提出了基于元数据存储集群的SQL-DFS文件系统.通过在Name Node中加入小文件处理模块实现了小文件元数据由Name Node内存到元数据存储集群的迁移,借助关系数据库集群实现了小文件元数据的快速读写,并对小文件读取过程进行优化,减少了文件客户端对Name Node的请求次数;通过将部分Data Node文件块的校验工作交由元数据存储集群完成,进一步降低了Name Node节点的负载压力.最终通过搭建HDFS和SQL-DFS实验平台,对HDFS和SQL-DFS 2种架构进行了小文件读写的对比测试,实验结果表明:SQLDFS在文件平均耗时(file average cost,FAC)和内存占用率方面均明显优于原HDFS架构,具有更好的小文件存储能力,可用于海量小文件的存储. 展开更多

关键词 Hadoop分布式文件系统(HDFS) 元数据存储集群 小文件 元数据 内存占用率

在线阅读 下载PDF 职称材料

面向工程试验的数据集成研究 被引量：1

4

作者 杨雁莹 王传栋 +2 位作者 黄志球 沈国华 张江涛 《计算机应用研究》 CSCD 北大核心 2005年第4期78-80,共3页

对分布异构环境中的工程试验数据的有效集成是全局试验决策支持的基础。依据工程数据组织分散、模式复杂多变的特点以及OLAP和数据挖掘对数据的要求,剖析了构建数据集成元对象模型的方法、邦联式工程数据仓库的集成途径和使用元对象模... 对分布异构环境中的工程试验数据的有效集成是全局试验决策支持的基础。依据工程数据组织分散、模式复杂多变的特点以及OLAP和数据挖掘对数据的要求,剖析了构建数据集成元对象模型的方法、邦联式工程数据仓库的集成途径和使用元对象模型实施异构数据集成的关键技术。 展开更多

关键词 公共元对象模型 数据集成 工程数据仓库系统 元数据存储库

在线阅读 下载PDF 职称材料

基于Windows平台的存储虚拟化按需分配技术 被引量：3

5

作者 刘飞 易乐天 +1 位作者 刘青昆 舒继武 《小型微型计算机系统》 CSCD 北大核心 2012年第5期976-980,共5页

如何有效地节约存储资源是企业级用户在部署存储虚拟化系统时需要重点考虑的问题.设计并实现了一种基于Win-dows平台的存储资源按需分配软件VA-for windows,该软件在系统内核态将动态分配的映射表整合为元数据存储池,通过索引查询机制... 如何有效地节约存储资源是企业级用户在部署存储虚拟化系统时需要重点考虑的问题.设计并实现了一种基于Win-dows平台的存储资源按需分配软件VA-for windows,该软件在系统内核态将动态分配的映射表整合为元数据存储池,通过索引查询机制和高效通信策略,透明化地为Windows用户提供虚拟存储设备.实验结果表明,与传统的虚拟卷相比,使用具备按需分配功能的虚拟卷虽然在I/O性能上稍有损失,但可以有效地节约磁盘空间,提高存储资源利用率. 展开更多

关键词 存储虚拟化 Windows内核驱动 元数据存储池 按需分配

在线阅读 下载PDF 职称材料

键值对与对象存储在分布式存储系统中的应用 被引量：5

6

作者 乔鼎 陈靓 梁久祯 《计算机工程与设计》 北大核心 2023年第6期1914-1920,F0003,共8页

为解决传统存储系统在海量文件存储和文件路径快速变更时难以兼顾的问题,在对比分析文件存储和对象存储利弊的基础上,提出将K-V键值对的文件目录结构与对象存储结合的方案,使系统在拥有高吞吐量的同时,快速完成目录的迁移工作。在使用T... 为解决传统存储系统在海量文件存储和文件路径快速变更时难以兼顾的问题,在对比分析文件存储和对象存储利弊的基础上,提出将K-V键值对的文件目录结构与对象存储结合的方案,使系统在拥有高吞吐量的同时,快速完成目录的迁移工作。在使用TiKV集群存储文件元数据提高数据扩容上限时,引入虚拟节点的哈希算法与代理节点结合,减少集群扩容时的IO漂移。实验结果表明,该系统具有吞吐量大、迁移速度快、水平扩展性强、扩容过程平稳的特点。 展开更多

关键词 对象存储 键值对 元数据存储 扩容稳定性 分布式存储 一致性哈希 负载均衡

在线阅读 下载PDF 职称材料

告读作者

7

《口腔医学研究》 CAS CSCD 北大核心 2024年第7期582-582,共1页

《口腔医学研究》从2016年1期开始,为每篇刊出文章标注中文DOI号。DOI是Digital Object Identifier的英文缩写,是国际通用的数字对象标识符。它被誉为“互联网上的条形码”,是互联网数字资源的身份证及唯一编码。同时DOI系统是一套完整... 《口腔医学研究》从2016年1期开始,为每篇刊出文章标注中文DOI号。DOI是Digital Object Identifier的英文缩写,是国际通用的数字对象标识符。它被誉为“互联网上的条形码”,是互联网数字资源的身份证及唯一编码。同时DOI系统是一套完整的国际服务体系,提供DOI的注册、解析及增值服务。DOI能够唯一性地标识一个单独的数字资源,并且可以保证在网络上永久链接。比如一个在线的电子文档,关于该电子文档的元数据存储在DOI服务系统。 展开更多

关键词 电子文档 条形码 元数据存储 口腔医学 DOI 数字对象标识符 增值服务 OBJECT

在线阅读 下载PDF 职称材料

告读作者

8

《口腔医学研究》 CAS CSCD 北大核心 2024年第2期146-146,共1页

《口腔医学研究》从2016年1期开始,为每篇刊出文章标注中文DOI号。DOI是Digital Object Identifier的英文缩写,是国际通用的数字对象标识符。它被誉为“互联网上的条形码”,是互联网数字资源的身份证及唯一编码。同时DOI系统是一套完整... 《口腔医学研究》从2016年1期开始,为每篇刊出文章标注中文DOI号。DOI是Digital Object Identifier的英文缩写,是国际通用的数字对象标识符。它被誉为“互联网上的条形码”,是互联网数字资源的身份证及唯一编码。同时DOI系统是一套完整的国际服务体系,提供DOI的注册、解析及增值服务。DOI能够唯一性地标识一个单独的数字资源,并且可以保证在网络上永久链接。比如一个在线的电子文档,关于该电子文档的元数据存储在DOI服务系统。 展开更多

关键词 电子文档 条形码 元数据存储 口腔医学 DOI 数字对象标识符 增值服务 OBJECT

在线阅读 下载PDF 职称材料

数字保存策略:模拟法 被引量：4

9

作者 唐光前 《情报杂志》 CSSCI 北大核心 2001年第5期54-56,共3页

数字保存策略是当前数字图书馆研究的热点之一,围绕“模拟法作为数字保存策略”这一问题,杰夫·罗森柏格、大卫.伯尔曼等专家展开了一场学术争论。本文对模拟法进行了系统的阐述,同时也提出了个人看法。

关键词 模拟法 移植法 数字保存策略 数字图书馆 模拟器 元数据存储技术 CAMILEON工程

在线阅读 下载PDF 职称材料

基于MSA的SMIM实现机制

10

作者 高志鹏 孟洛明 +1 位作者 李文璟 邱雪松 《计算机工程》 CAS CSCD 北大核心 2008年第2期31-33,共3页

提出基于元数据存储访问的共享管理信息模型实现机制,以解决异构系统互操作问题,保证数据一致性。该实现机制基于已有异构系统和已有数据,使用分层的逻辑划分,将实现过程划分为数据应用层、数据访问适配层、数据访问代理层、元数据存储... 提出基于元数据存储访问的共享管理信息模型实现机制,以解决异构系统互操作问题,保证数据一致性。该实现机制基于已有异构系统和已有数据,使用分层的逻辑划分,将实现过程划分为数据应用层、数据访问适配层、数据访问代理层、元数据存储层及数据存储层5个层次,并介绍了各个层次的功能和相关算法。 展开更多

关键词 元数据存储访问 共享管理信息模型 数据一致性 网络管理

在线阅读 下载PDF 职称材料

扩展的可信网络平台接入与认证 被引量：2

11

作者 王佳慧 吴振强 李洁 《计算机工程与设计》 CSCD 北大核心 2010年第2期239-242,248,共5页

为了对终端接入可信网络的全生命周期的完整性进行实时监控与调节,通过分析现有可信网络认证模型的不足,基于可信网络认证与接入的三方模型,加入了元数据存储模块和流量控制器以及传感器模块,提出了一种扩展的可信网络平台接入与认证模... 为了对终端接入可信网络的全生命周期的完整性进行实时监控与调节,通过分析现有可信网络认证模型的不足,基于可信网络认证与接入的三方模型,加入了元数据存储模块和流量控制器以及传感器模块,提出了一种扩展的可信网络平台接入与认证模型,并描述了一个基本的验证过程。通过在可信网络服务器端引入一个用于判定资源属性的模块,大大提高了服务器性能。然后描述了全生命周期监控的定义和实例。最后指出了扩展的可信网络认证与接入模型需要考虑的安全性和机密性问题。 展开更多

关键词 全生命周期 动态完整性 元数据存储点 元数据接入协议 资源属性判定模块

在线阅读 下载PDF 职称材料

告读作者

12

《实用口腔医学杂志》 CAS CSCD 北大核心 2021年第5期728-728,共1页

《实用口腔医学杂志》自2009年第1期开始,为每篇刊出文章标注中文DOI号。一、什么是DOI?DOI是Digital Object Identifier的英文缩写,是国际通用的数字对象标识符。它被誉为“互联网上的条形码”,是互联网数字资源的身份证及唯一编码。同... 《实用口腔医学杂志》自2009年第1期开始,为每篇刊出文章标注中文DOI号。一、什么是DOI?DOI是Digital Object Identifier的英文缩写,是国际通用的数字对象标识符。它被誉为“互联网上的条形码”,是互联网数字资源的身份证及唯一编码。同时DOI系统是一套完整的国际服务体系,提供DOI的注册、解析及增值服务。二、DOI有何用途?DOI能够唯一性地标识一个单独的数字资源,并且可以保证在网络上永久链接。比如一个在线的电子文档,关于该电子文档的元数据存储在DOI服务系统。 展开更多

关键词 电子文档 条形码 元数据存储 DOI 数字对象标识符 增值服务 OBJECT 身份证

在线阅读 下载PDF 职称材料