检索结果-维普期刊中文期刊服务平台

一种基于动态空间划分和压缩布隆过滤器相结合的分布式元数据负载均衡算法被引量：2: 1; 作者薛梅婷俞万刚 +3 位作者张纪林曾艳袁俊峰周丽《计算机工程与科学》 CSCD 北大核心 2024年第8期1381-1389,共9页; 分布式元数据管理系统利用多个元数据服务器对大量元数据进行存储和管理。该系统将海量元数据通过不同的映射策略分配到不同的元数据服务器上,减少单台元数据服务器所处理的数据量,从而减少磁盘访问次数,进而提高整个元数据管理系统的... 展开更多; 关键词分布式元数据管理负载均衡算法一致性哈希压缩布隆过滤器; 在线阅读下载PDF 职称材料

BWMMS元数据分布信息缓存管理: 2; 作者杨德志许鲁张建刚《计算机科学》 CSCD 北大核心 2007年第10期143-145,158,共4页; BWMMS是BWFS的分布式文件系统元数据服务子系统。它充分利用系统访问负载的动态性和局部性特征,通过简单的集中决策机制管理元数据请求负载在多个元数据服务器的分布。为降低集中决策点可能的瓶颈限制,集中决策点位于元数据请求处理路... 展开更多; 关键词分布式文件系统元数据服务元数据分布信息管理缓存有效性; 在线阅读下载PDF 职称材料

SMDFS分布式海量小文件系统的大空间聚合存储技术被引量：4: 3; 作者严巍巍何连跃 +1 位作者李三霞成颖佼《计算机研究与发展》 EI CSCD 北大核心 2015年第S2期29-34,共6页; 海量小文件聚合存储技术大多以目录或逻辑目录为单位,将小文件聚合为实际存储的大文件并建立小文件的元数据信息,实现小文件的快速访问.传统小文件聚合存储技术读写操作性能受目录结构的影响差别较大.在现有研究成果的基础上,分析不同... 展开更多; 关键词海量小文件系统 HDFS 聚合存储元数据分裂分布式元数据管理; 在线阅读下载PDF 职称材料

修正Gibbs采样的有限混合模型无监督学习算法被引量：3: 4; 作者刘伟峰韩崇昭石勇《西安交通大学学报》 EI CAS CSCD 北大核心 2009年第2期15-19,共5页; 针对传统有限混合模型无监督学习算法不能处理参数维数变化的问题,提出了一种基于修正Gibbs采样的无监督学习算法.该算法的关键是,在每一次完全采样之后引入分布元的合并和剔除技术,即将利用均值、协方差矩阵差值的2范数作为合并的判断... 展开更多; 关键词无监督学习有限混合模型参数维数变化跳变分布元管理; 在线阅读下载PDF 职称材料

题名一种基于动态空间划分和压缩布隆过滤器相结合的分布式元数据负载均衡算法被引量：2: 1; 作者薛梅婷俞万刚张纪林曾艳袁俊峰周丽; 机构杭州电子科技大学网络空间安全学院杭州电子科技大学计算机学院; 出处《计算机工程与科学》 CSCD 北大核心 2024年第8期1381-1389,共9页; 基金浙江省重点研发计划(2023C03194,2024C01211) 浙江省自然科学基金(LQ23F020015,LTGG24F020007)。; 文摘分布式元数据管理系统利用多个元数据服务器对大量元数据进行存储和管理。该系统将海量元数据通过不同的映射策略分配到不同的元数据服务器上,减少单台元数据服务器所处理的数据量,从而减少磁盘访问次数,进而提高整个元数据管理系统的性能。元数据管理系统通常会使用哈希函数将元数据键映射到不同的元数据服务器中。然而,当数据特征值相似时,由于散列函数的单向性,会导致数据分布不均衡的问题,造成元数据服务器性能下降。为解决上述问题,提出了一种动态空间划分和压缩布隆过滤器相结合的元数据负载均衡算法,该算法首先构建一个哈希桶来组织元数据键,通过哈希算法将元数据键映射到不同的哈希桶中;在映射过程中,根据元数据服务器的负载情况动态调整目标哈希桶,并在上述哈希桶中有序地保存元数据键的映射信息。当访问元数据时,首先通过压缩布隆过滤器对元数据键进行预处理,然后通过二分查找在指定的哈希桶中进行元数据映射信息的查找。与近年来提出的元数据管理算法相比,所提算法在映射键发生倾斜时仍能保证元数据服务器负载均衡,并通过对比实验表明,所提算法相比最优的元数据管理算法,在内存占用仅提升2%的条件下,获得了20%的搜索性能提升。; 关键词分布式元数据管理负载均衡算法一致性哈希压缩布隆过滤器; Keywords distributed metadata management load balancing algorithm consistent hashing compressed Bloom filter; 分类号 TP301 [自动化与计算机技术—计算机系统结构]; 在线阅读下载PDF 职称材料

题名BWMMS元数据分布信息缓存管理: 2; 作者杨德志许鲁张建刚; 机构中国科学院计算技术研究所; 出处《计算机科学》 CSCD 北大核心 2007年第10期143-145,158,共4页; 基金国家自然科学基金项目"面向网络存储的集群系统的体系结构" 受理号60373045。; 文摘 BWMMS是BWFS的分布式文件系统元数据服务子系统。它充分利用系统访问负载的动态性和局部性特征,通过简单的集中决策机制管理元数据请求负载在多个元数据服务器的分布。为降低集中决策点可能的瓶颈限制,集中决策点位于元数据请求处理路径的末端。本文介绍各个元数据服务器上用采降低时后端集中决策点的压力,提高元数据访问效率的元数据分布信息缓存,并通过测试数据评估缓存命中率时后端集中决策点和元数据访问效率的影响。; 关键词分布式文件系统元数据服务元数据分布信息管理缓存有效性; Keywords Distributed file system metadata service, Metadata distribution management,Cache efficiency; 分类号 TP368.5 [自动化与计算机技术—计算机系统结构]; 在线阅读下载PDF 职称材料

题名SMDFS分布式海量小文件系统的大空间聚合存储技术被引量：4: 3; 作者严巍巍何连跃李三霞成颖佼; 机构国防科学技术大学计算机学院; 出处《计算机研究与发展》 EI CSCD 北大核心 2015年第S2期29-34,共6页; 文摘海量小文件聚合存储技术大多以目录或逻辑目录为单位,将小文件聚合为实际存储的大文件并建立小文件的元数据信息,实现小文件的快速访问.传统小文件聚合存储技术读写操作性能受目录结构的影响差别较大.在现有研究成果的基础上,分析不同目录结构聚合空间的特征,提出大空间聚合存储技术和元数据分裂技术,为不同目录结构的海量小文件存储提供通用的解决方法,并基于开源分布式文件系统HDFS实现了一个分布式海量小文件系统SMDFS.测试表明,大空间聚合技术能有效支持不同目录结构的海量小文件数据,相较于SMDFS早期版本,小文件数据装载和访问性能均有很大程度的提高.; 关键词海量小文件系统 HDFS 聚合存储元数据分裂分布式元数据管理; Keywords massive small files system HDFS aggregate storage metadata division distributed metadata management; 分类号 TP333 [自动化与计算机技术—计算机系统结构]; 在线阅读下载PDF 职称材料

题名修正Gibbs采样的有限混合模型无监督学习算法被引量：3: 4; 作者刘伟峰韩崇昭石勇; 机构西安交通大学电子与信息工程学院; 出处《西安交通大学学报》 EI CAS CSCD 北大核心 2009年第2期15-19,共5页; 基金国家自然科学基金资助项目(60574033 60602026) 国家重点基础研究发展规划资助项目(2007CB311006); 文摘针对传统有限混合模型无监督学习算法不能处理参数维数变化的问题,提出了一种基于修正Gibbs采样的无监督学习算法.该算法的关键是,在每一次完全采样之后引入分布元的合并和剔除技术,即将利用均值、协方差矩阵差值的2范数作为合并的判断准则,最小且小于阈值的分布元权重作为剔除规则.仿真实验表明,所提算法对于参数初值的选择是不敏感的,对于分布元个数的先验信息要求得更少,它不仅可以处理维数变化问题,而且不必计算跳变概率,同时能够很好地估计出分布元个数及其参数.; 关键词无监督学习有限混合模型参数维数变化跳变分布元管理; Keywords unsupervised learning finite mixture model parameter dimension change jump component management; 分类号 TP391 [自动化与计算机技术—计算机应用技术]; 在线阅读下载PDF 职称材料

	题名	作者	出处	发文年	被引量	操作
1	一种基于动态空间划分和压缩布隆过滤器相结合的分布式元数据负载均衡算法	薛梅婷俞万刚张纪林曾艳袁俊峰周丽	《计算机工程与科学》 CSCD 北大核心	2024	2	在线阅读下载PDF 职称材料
2	BWMMS元数据分布信息缓存管理	杨德志许鲁张建刚	《计算机科学》 CSCD 北大核心	2007	0	在线阅读下载PDF 职称材料
3	SMDFS分布式海量小文件系统的大空间聚合存储技术	严巍巍何连跃李三霞成颖佼	《计算机研究与发展》 EI CSCD 北大核心	2015	4	在线阅读下载PDF 职称材料
4	修正Gibbs采样的有限混合模型无监督学习算法	刘伟峰韩崇昭石勇	《西安交通大学学报》 EI CAS CSCD 北大核心	2009	3	在线阅读下载PDF 职称材料