期刊导航
期刊开放获取
上海教育软件发展有限公..
期刊文献
+
任意字段
题名或关键词
题名
关键词
文摘
作者
第一作者
机构
刊名
分类号
参考文献
作者简介
基金资助
栏目信息
任意字段
题名或关键词
题名
关键词
文摘
作者
第一作者
机构
刊名
分类号
参考文献
作者简介
基金资助
栏目信息
检索
高级检索
期刊导航
共找到
2
篇文章
<
1
>
每页显示
20
50
100
已选择
0
条
导出题录
引用分析
参考文献
引证文献
统计分析
检索结果
已选文献
显示方式：
文摘
详细
列表
相关度排序
被引量排序
时效性排序
林业资源数据集群的快速索引设计
被引量：
1
1
作者
李惺颖
谢阳生
+2 位作者
唐小明
罗鹏
黄龙
《吉林大学学报（理学版）》
CAS
CSCD
北大核心
2013年第6期1111-1117,共7页
设计一种快速索引以管理分布存储的林业资源数据,通过大量独立数据节点共同负载数据请求,减少数据访问过程的互斥,实现了空间与属性数据的分布式存储并行访问.实验结果表明,基于目前的应用服务器集群,应用该快速索引方法,能以较低的改...
设计一种快速索引以管理分布存储的林业资源数据,通过大量独立数据节点共同负载数据请求,减少数据访问过程的互斥,实现了空间与属性数据的分布式存储并行访问.实验结果表明,基于目前的应用服务器集群,应用该快速索引方法,能以较低的改进成本提高整个数据集群的快速统计和更新能力.
展开更多
关键词
林业资源
集群数据存储
多库
存储
并行索引
在线阅读
下载PDF
职称材料
SQL-DFS:一种基于HDFS的海量小文件存储系统
被引量：
7
2
作者
马志强
杨双涛
+1 位作者
闫瑞
张泽广
《北京工业大学学报》
CAS
CSCD
北大核心
2016年第1期134-141,共8页
针对Hadoop分布式文件系统(Hadoop distributed file system,HDFS)进行小文件存储时Name Node内存占用率高的问题,通过分析HDFS基础架构,提出了基于元数据存储集群的SQL-DFS文件系统.通过在Name Node中加入小文件处理模块实现了小文件...
针对Hadoop分布式文件系统(Hadoop distributed file system,HDFS)进行小文件存储时Name Node内存占用率高的问题,通过分析HDFS基础架构,提出了基于元数据存储集群的SQL-DFS文件系统.通过在Name Node中加入小文件处理模块实现了小文件元数据由Name Node内存到元数据存储集群的迁移,借助关系数据库集群实现了小文件元数据的快速读写,并对小文件读取过程进行优化,减少了文件客户端对Name Node的请求次数;通过将部分Data Node文件块的校验工作交由元数据存储集群完成,进一步降低了Name Node节点的负载压力.最终通过搭建HDFS和SQL-DFS实验平台,对HDFS和SQL-DFS 2种架构进行了小文件读写的对比测试,实验结果表明:SQLDFS在文件平均耗时(file average cost,FAC)和内存占用率方面均明显优于原HDFS架构,具有更好的小文件存储能力,可用于海量小文件的存储.
展开更多
关键词
Hadoop分布式文件系统(HDFS)
元
数据
存储
集
群
小文件
元
数据
内存占用率
在线阅读
下载PDF
职称材料
题名
林业资源数据集群的快速索引设计
被引量：
1
1
作者
李惺颖
谢阳生
唐小明
罗鹏
黄龙
机构
中国林业科学研究院资源信息研究所
北京林业大学水土保持学院
出处
《吉林大学学报（理学版）》
CAS
CSCD
北大核心
2013年第6期1111-1117,共7页
基金
林业公益性科研专项基金(批准号:201304215)
文摘
设计一种快速索引以管理分布存储的林业资源数据,通过大量独立数据节点共同负载数据请求,减少数据访问过程的互斥,实现了空间与属性数据的分布式存储并行访问.实验结果表明,基于目前的应用服务器集群,应用该快速索引方法,能以较低的改进成本提高整个数据集群的快速统计和更新能力.
关键词
林业资源
集群数据存储
多库
存储
并行索引
Keywords
forestry resource
cluster data storage
multiple database storage
parallel index
分类号
TP311 [自动化与计算机技术—计算机软件与理论]
在线阅读
下载PDF
职称材料
题名
SQL-DFS:一种基于HDFS的海量小文件存储系统
被引量：
7
2
作者
马志强
杨双涛
闫瑞
张泽广
机构
内蒙古工业大学信息工程学院
出处
《北京工业大学学报》
CAS
CSCD
北大核心
2016年第1期134-141,共8页
基金
国家自然科学基金资助项目(61363052)
内蒙古自治区自然科学基金资助项目(2014MS0608)
内蒙古自治区高等学校科学研究项目(NJZY12052)
文摘
针对Hadoop分布式文件系统(Hadoop distributed file system,HDFS)进行小文件存储时Name Node内存占用率高的问题,通过分析HDFS基础架构,提出了基于元数据存储集群的SQL-DFS文件系统.通过在Name Node中加入小文件处理模块实现了小文件元数据由Name Node内存到元数据存储集群的迁移,借助关系数据库集群实现了小文件元数据的快速读写,并对小文件读取过程进行优化,减少了文件客户端对Name Node的请求次数;通过将部分Data Node文件块的校验工作交由元数据存储集群完成,进一步降低了Name Node节点的负载压力.最终通过搭建HDFS和SQL-DFS实验平台,对HDFS和SQL-DFS 2种架构进行了小文件读写的对比测试,实验结果表明:SQLDFS在文件平均耗时(file average cost,FAC)和内存占用率方面均明显优于原HDFS架构,具有更好的小文件存储能力,可用于海量小文件的存储.
关键词
Hadoop分布式文件系统(HDFS)
元
数据
存储
集
群
小文件
元
数据
内存占用率
Keywords
Hadoop distributed file system（HDFS）
metadata storage clusters
small files
metadata
memory occupancy
分类号
TP391 [自动化与计算机技术—计算机应用技术]
在线阅读
下载PDF
职称材料
题名
作者
出处
发文年
被引量
操作
1
林业资源数据集群的快速索引设计
李惺颖
谢阳生
唐小明
罗鹏
黄龙
《吉林大学学报（理学版）》
CAS
CSCD
北大核心
2013
1
在线阅读
下载PDF
职称材料
2
SQL-DFS:一种基于HDFS的海量小文件存储系统
马志强
杨双涛
闫瑞
张泽广
《北京工业大学学报》
CAS
CSCD
北大核心
2016
7
在线阅读
下载PDF
职称材料
已选择
0
条
导出题录
引用分析
参考文献
引证文献
统计分析
检索结果
已选文献
上一页
1
下一页
到第
页
确定
用户登录
登录
IP登录
使用帮助
返回顶部
