期刊文献+
共找到7篇文章
< 1 >
每页显示 20 50 100
数据网格中一种基于副本和缓存的元数据管理系统 被引量:3
1
作者 石柯 王庆春 吴松 《计算机研究与发展》 EI CSCD 北大核心 2004年第12期2206-2210,共5页
元数据管理是数据网格的关键技术之一 对全局分布式存储系统GDSS(globaldistributedstoragesystem)中的元数据管理进行了改进 ,提出了一种基于副本和缓存的分布式元数据管理系统RCMMS(replicationandcachebaseddis tributedmetadataman... 元数据管理是数据网格的关键技术之一 对全局分布式存储系统GDSS(globaldistributedstoragesystem)中的元数据管理进行了改进 ,提出了一种基于副本和缓存的分布式元数据管理系统RCMMS(replicationandcachebaseddis tributedmetadatamanagementsystem) ,缓存设置在GDSS系统中的存储服务点SSP(storageservicepoint)端 还讨论了RCMMS的设计、实现以及测试 RCMMS提供了动态管理元数据副本的有效算法 分析和测试表明 ,副本结合缓存的元数据管理方案在性能上超过了GDSS现有的元数据管理系统 。 展开更多
关键词 元数据管理 数据网格 全局分布式存储系统 存储服务点 可靠性
在线阅读 下载PDF
一种P2P环境下的B^+树索引管理算法 被引量:5
2
作者 鞠大鹏 黎明 +3 位作者 胡进锋 汪东升 郑纬民 马永泉 《计算机研究与发展》 EI CSCD 北大核心 2005年第8期1438-1444,共7页
PeertoPeer(P2P)广域存储系统的分布式数据查询是其重要组成部分.其中对连续有序数据的查询还没有有效的算法.提出了一种在P2P环境下为连续有序数据建立分布式索引的算法——PBlink树.PBlink树具有可靠性高、吞吐率高、网络开销低、负... PeertoPeer(P2P)广域存储系统的分布式数据查询是其重要组成部分.其中对连续有序数据的查询还没有有效的算法.提出了一种在P2P环境下为连续有序数据建立分布式索引的算法——PBlink树.PBlink树具有可靠性高、吞吐率高、网络开销低、负载均衡的性质,比传统的分布式索引算法更能适应P2P环境.理论推导和实验数据证明,PBlink树算法的数据通信开销是传统分布式索引的20%,查询效率是其7倍.在承受整个系统中50%节点失效的情况下,仍可以保证85%查询的正确性,具有很强的可靠性. 展开更多
关键词 PEER-TO-PEER 广域存储系统 分布式索引 PB-link树
在线阅读 下载PDF
青海省土壤有机碳储量估算及其源汇因素分析 被引量:20
3
作者 钟聪 杨忠芳 +2 位作者 夏学齐 侯青叶 姜伟 《现代地质》 CAS CSCD 北大核心 2012年第5期896-909,共14页
收集了青海省第二次土壤普查资料的2 856个土壤统计剖面数据,计算了20世纪80年代青海省土壤0~20 cm和0~65 cm深度的土壤有机碳密度,根据1∶400万数字化土壤类型图,统计了不同类型土壤的土壤有机碳储量。结合本研究采集的105个表层土... 收集了青海省第二次土壤普查资料的2 856个土壤统计剖面数据,计算了20世纪80年代青海省土壤0~20 cm和0~65 cm深度的土壤有机碳密度,根据1∶400万数字化土壤类型图,统计了不同类型土壤的土壤有机碳储量。结合本研究采集的105个表层土壤数据,估算了青海省典型地区土壤有机碳近30年来的年均变化量。研究建立了土壤有机碳含量与温度、降雨等气候因子的关系方程,根据青海省土地利用现状估算了不同时期土地利用方式变化对青海省土壤碳源汇转化的影响。结果显示:(1)0~20 cm表土层SOCD20加权平均值为4.509 kg/m2,其值在各类型土壤间差异较为显著,SOCR20为2.953 Pg;0~65 cm的SOCD65加权平均值为13.597 kg/m2,SOCR65为8.904 Pg。由于受气候、土壤类型、植被类型、海拔等因素的影响,青海省土壤有机碳密度的分布呈现自东南向西北递减的带状分布特征;(2)近30年来青海省有机碳含量明显下降;(3)根据气象站的资料,分析了近50年来的年均气温变化趋势,预测在全球变暖背景下青藏高原土壤将表现出碳源效应,而研究区愈加明显的人类活动影响、大面积草地退化等土地利用方式改变也是造成土壤碳释放的主要原因之一。 展开更多
关键词 土壤有机碳密度 土壤有机碳储量 空间分布 全球变暖 碳源汇转化 青海省
在线阅读 下载PDF
曙光星云分布式文件系统:海量小文件存取 被引量:9
4
作者 马灿 孟丹 熊劲 《小型微型计算机系统》 CSCD 北大核心 2012年第7期1481-1488,共8页
随着互联网应用的发展和云计算的兴起,在线图片、音频、视频以及微博等服务逐渐广泛发展,这些应用展示了与传统应用截然不同的数据访问和存储模式.数据中心内每秒钟都有大量较小文件的生成、分析和返回,这些应用对高并发海量文件的高吞... 随着互联网应用的发展和云计算的兴起,在线图片、音频、视频以及微博等服务逐渐广泛发展,这些应用展示了与传统应用截然不同的数据访问和存储模式.数据中心内每秒钟都有大量较小文件的生成、分析和返回,这些应用对高并发海量文件的高吞吐、低延迟读写提出了新的挑战.提出基于分布式表存储的全新的分布式文件系统HVFS来管理数以十亿计的文件,并同时支持高吞吐和低延迟的文件访问.HVFS通过改进分布式可扩展哈希来管理元数据、日志结构的格式和列存储来利用时空局部性.本文描述了HVFS的设计和实现并进行了中等规模的实验.实验显示HVFS的表存储结构能够线性的扩展,并在82个结点上提供超过240,000次/秒、100,000次/秒的数据(<1KB)写和读;基于FUSE的实现在32个节点上提供超过180,000个/秒的文件创建速度. 展开更多
关键词 分布式文件系统 全局名字空间 海量文件 小文件访问 表存储
在线阅读 下载PDF
基于MapReduce的轨迹压缩并行化方法 被引量:3
5
作者 吴家皋 夏轩 刘林峰 《计算机应用》 CSCD 北大核心 2017年第5期1282-1286,1330,共6页
带有全球定位系统(GPS)功能设备的增多,产生大量的时空轨迹数据,给数据的存储、传输和处理带来了沉重的负担。为了减轻这种负担,各种轨迹压缩方法也随之产生。提出了一种基于MapReduce的并行化轨迹压缩方法,针对并行化导致的分段点前后... 带有全球定位系统(GPS)功能设备的增多,产生大量的时空轨迹数据,给数据的存储、传输和处理带来了沉重的负担。为了减轻这种负担,各种轨迹压缩方法也随之产生。提出了一种基于MapReduce的并行化轨迹压缩方法,针对并行化导致的分段点前后轨迹的相关性被破坏的问题,首先,采用两种分段点相互交错的划分方法划分轨迹;然后,将分段轨迹分配到多个节点上进行并行化压缩;最后,对压缩结果进行匹配合并。性能测试分析结果表明,所提出的并行化轨迹压缩方法能够大幅提高压缩效率,而且能完全消除因分段导致分段点前后相关性被破坏带来的误差。 展开更多
关键词 轨迹压缩 分布式存储 MAPREDUCE HADOOP 全球定位系统轨迹
在线阅读 下载PDF
广域存储虚拟化系统的文件访问
6
作者 石柯 刘志坤 吴松 《计算机工程与科学》 CSCD 2006年第1期98-100,共3页
广域存储虚拟化所要解决的一个问题是如何实现对分布的文件进行方便高效的访问。本文在分析了几种常见的文件系统后,针对广域存储虚拟化系统的特征,设计了客户端的文件访问模式,并实现了一套应用于该系统的文件访问接口,使用户能够像使... 广域存储虚拟化所要解决的一个问题是如何实现对分布的文件进行方便高效的访问。本文在分析了几种常见的文件系统后,针对广域存储虚拟化系统的特征,设计了客户端的文件访问模式,并实现了一套应用于该系统的文件访问接口,使用户能够像使用本地系统一样使用广域存储虚拟化系统的存储资源。 展开更多
关键词 广域存储虚拟化系统 文件访问模式 文件访问接口
在线阅读 下载PDF
基于链路带宽的分布式存储系统框架及动态负载均衡技术 被引量:8
7
作者 何遵文 宋佳 +3 位作者 陈昊 高升华 陈许星 张焱 《北京理工大学学报》 EI CAS CSCD 北大核心 2017年第9期964-969,共6页
针对在节点间进行数据传输、备份等操作时,不同节点间链路带宽将限制分布式存储系统的性能的问题,借鉴软件定义网络及云存储技术的基本思想,通过对控制流与数据流的分离,提出了一种基于链路带宽的分布式存储系统框架及动态负载均衡技术... 针对在节点间进行数据传输、备份等操作时,不同节点间链路带宽将限制分布式存储系统的性能的问题,借鉴软件定义网络及云存储技术的基本思想,通过对控制流与数据流的分离,提出了一种基于链路带宽的分布式存储系统框架及动态负载均衡技术.所提出框架中,在分布式数据节点之外引入一个中心控制节点,该节点掌握全局网络视图,全局网络视图中既包括数据存储表记录存储数据的分布,又包括当前链路带宽情况.在用户读取数据时,根据数据存储表确定需要的数据存放于哪些数据存储节点,指派相应的数据存储节点根据路由表发送数据包,并实时监测网络中的链路带宽负载情况,及时调整数据的传输路径.仿真验证所提架构和算法可以有效解决海量数据在不同位置的分配调度,以及缩短用户对大量数据提取的响应时间及提升存储速率等问题. 展开更多
关键词 链路带宽 分布式存储 全局网络视图 动态负载均衡
在线阅读 下载PDF
上一页 1 下一页 到第
使用帮助 返回顶部