期刊导航
期刊开放获取
上海教育软件发展有限公..
期刊文献
+
任意字段
题名或关键词
题名
关键词
文摘
作者
第一作者
机构
刊名
分类号
参考文献
作者简介
基金资助
栏目信息
任意字段
题名或关键词
题名
关键词
文摘
作者
第一作者
机构
刊名
分类号
参考文献
作者简介
基金资助
栏目信息
检索
高级检索
期刊导航
共找到
1
篇文章
<
1
>
每页显示
20
50
100
已选择
0
条
导出题录
引用分析
参考文献
引证文献
统计分析
检索结果
已选文献
显示方式：
文摘
详细
列表
相关度排序
被引量排序
时效性排序
异构Hadoop集群下自适应平衡数据存储的大数据放置策略
被引量：
3
1
作者
张少辉
张中军
于来行
《现代电子技术》
北大核心
2016年第10期49-53,57,共6页
Hadoop是一种处理和存储大数据的平台,针对异构Hadoop集群下采用均等数据分配方法易降低系统计算性能的问题,提出一种自适应平衡数据存储的大数据放置策略。根据异构集群中各节点的计算能力比例,将数据分配到节点中。在任务处理过程中,...
Hadoop是一种处理和存储大数据的平台,针对异构Hadoop集群下采用均等数据分配方法易降低系统计算性能的问题,提出一种自适应平衡数据存储的大数据放置策略。根据异构集群中各节点的计算能力比例,将数据分配到节点中。在任务处理过程中,根据反馈的任务完成时间信息,动态更新节点的能力比例,自适应调整数据分配,从而使异构Hadoop集群中各节点处理数据的时间大致相同,降低节点之间的数据移动量,提高了节点利用率。实验结果表明,该策略能够有效缩减任务完成时间,提高了系统的整体性能。
展开更多
关键词
异构Hadoop集群
大
数据
放置
数据
存储
平台
平衡数据存储
在线阅读
下载PDF
职称材料
题名
异构Hadoop集群下自适应平衡数据存储的大数据放置策略
被引量：
3
1
作者
张少辉
张中军
于来行
机构
周口师范学院网络工程学院
周口师范学院计算机科学与技术学院
大连理工大学计算机科学与技术学院
出处
《现代电子技术》
北大核心
2016年第10期49-53,57,共6页
基金
河南省科技厅软科学研究计划项目(142400411213)
河南省高等学校重点科研项目(15A520118)
河南省教育厅科技重点项目(14B520014)
文摘
Hadoop是一种处理和存储大数据的平台,针对异构Hadoop集群下采用均等数据分配方法易降低系统计算性能的问题,提出一种自适应平衡数据存储的大数据放置策略。根据异构集群中各节点的计算能力比例,将数据分配到节点中。在任务处理过程中,根据反馈的任务完成时间信息,动态更新节点的能力比例,自适应调整数据分配,从而使异构Hadoop集群中各节点处理数据的时间大致相同,降低节点之间的数据移动量,提高了节点利用率。实验结果表明,该策略能够有效缩减任务完成时间,提高了系统的整体性能。
关键词
异构Hadoop集群
大
数据
放置
数据
存储
平台
平衡数据存储
Keywords
heterogeneous Hadoop cluster
big data placement
data storage platform
balance data storage
分类号
TN915.34 [电子电信—通信与信息系统]
TP393 [自动化与计算机技术—计算机应用技术]
在线阅读
下载PDF
职称材料
题名
作者
出处
发文年
被引量
操作
1
异构Hadoop集群下自适应平衡数据存储的大数据放置策略
张少辉
张中军
于来行
《现代电子技术》
北大核心
2016
3
在线阅读
下载PDF
职称材料
已选择
0
条
导出题录
引用分析
参考文献
引证文献
统计分析
检索结果
已选文献
上一页
1
下一页
到第
页
确定
用户登录
登录
IP登录
使用帮助
返回顶部
