期刊导航
期刊开放获取
上海教育软件发展有限公..
期刊文献
+
任意字段
题名或关键词
题名
关键词
文摘
作者
第一作者
机构
刊名
分类号
参考文献
作者简介
基金资助
栏目信息
任意字段
题名或关键词
题名
关键词
文摘
作者
第一作者
机构
刊名
分类号
参考文献
作者简介
基金资助
栏目信息
检索
高级检索
期刊导航
共找到
2
篇文章
<
1
>
每页显示
20
50
100
已选择
0
条
导出题录
引用分析
参考文献
引证文献
统计分析
检索结果
已选文献
显示方式：
文摘
详细
列表
相关度排序
被引量排序
时效性排序
异构Hadoop集群下自适应平衡数据存储的大数据放置策略
被引量：
3
1
作者
张少辉
张中军
于来行
《现代电子技术》
北大核心
2016年第10期49-53,57,共6页
Hadoop是一种处理和存储大数据的平台,针对异构Hadoop集群下采用均等数据分配方法易降低系统计算性能的问题,提出一种自适应平衡数据存储的大数据放置策略。根据异构集群中各节点的计算能力比例,将数据分配到节点中。在任务处理过程中,...
Hadoop是一种处理和存储大数据的平台,针对异构Hadoop集群下采用均等数据分配方法易降低系统计算性能的问题,提出一种自适应平衡数据存储的大数据放置策略。根据异构集群中各节点的计算能力比例,将数据分配到节点中。在任务处理过程中,根据反馈的任务完成时间信息,动态更新节点的能力比例,自适应调整数据分配,从而使异构Hadoop集群中各节点处理数据的时间大致相同,降低节点之间的数据移动量,提高了节点利用率。实验结果表明,该策略能够有效缩减任务完成时间,提高了系统的整体性能。
展开更多
关键词
异构Hadoop集群
大
数据
放置
数据存储平台
平衡
数据
存储
在线阅读
下载PDF
职称材料
面向铁路客运大数据的客流分析研究及应用
被引量：
4
2
作者
罗明
《中国铁路》
2020年第4期105-110,共6页
从铁路客运业务产生的海量数据入手,研究如何从客运大数据中深度挖掘客流数据主要指标,提出构建分布式客运数据存储平台的方案,以提升数据的存储速率和分析能力、提高数据库利用率,并验证了分布式数据库无论从硬件还是软件方面,与传统...
从铁路客运业务产生的海量数据入手,研究如何从客运大数据中深度挖掘客流数据主要指标,提出构建分布式客运数据存储平台的方案,以提升数据的存储速率和分析能力、提高数据库利用率,并验证了分布式数据库无论从硬件还是软件方面,与传统数据库相比均具有显著优势。利用该平台建立数据的多维度关联,对中国铁路武汉局集团有限公司和九大方向的客座率、列车密度表等指标进行实时分析,为客流预测提供依据。
展开更多
关键词
铁路客运
大
数据
分布式
数据存储平台
客流分析
Greenplum
Vmware
平台
在线阅读
下载PDF
职称材料
题名
异构Hadoop集群下自适应平衡数据存储的大数据放置策略
被引量：
3
1
作者
张少辉
张中军
于来行
机构
周口师范学院网络工程学院
周口师范学院计算机科学与技术学院
大连理工大学计算机科学与技术学院
出处
《现代电子技术》
北大核心
2016年第10期49-53,57,共6页
基金
河南省科技厅软科学研究计划项目(142400411213)
河南省高等学校重点科研项目(15A520118)
河南省教育厅科技重点项目(14B520014)
文摘
Hadoop是一种处理和存储大数据的平台,针对异构Hadoop集群下采用均等数据分配方法易降低系统计算性能的问题,提出一种自适应平衡数据存储的大数据放置策略。根据异构集群中各节点的计算能力比例,将数据分配到节点中。在任务处理过程中,根据反馈的任务完成时间信息,动态更新节点的能力比例,自适应调整数据分配,从而使异构Hadoop集群中各节点处理数据的时间大致相同,降低节点之间的数据移动量,提高了节点利用率。实验结果表明,该策略能够有效缩减任务完成时间,提高了系统的整体性能。
关键词
异构Hadoop集群
大
数据
放置
数据存储平台
平衡
数据
存储
Keywords
heterogeneous Hadoop cluster
big data placement
data storage platform
balance data storage
分类号
TN915.34 [电子电信—通信与信息系统]
TP393 [自动化与计算机技术—计算机应用技术]
在线阅读
下载PDF
职称材料
题名
面向铁路客运大数据的客流分析研究及应用
被引量：
4
2
作者
罗明
机构
中国铁路武汉局集团有限公司信息技术所
出处
《中国铁路》
2020年第4期105-110,共6页
基金
中国铁路武汉局集团有限公司科技研究开发计划项目(19Y02)。
文摘
从铁路客运业务产生的海量数据入手,研究如何从客运大数据中深度挖掘客流数据主要指标,提出构建分布式客运数据存储平台的方案,以提升数据的存储速率和分析能力、提高数据库利用率,并验证了分布式数据库无论从硬件还是软件方面,与传统数据库相比均具有显著优势。利用该平台建立数据的多维度关联,对中国铁路武汉局集团有限公司和九大方向的客座率、列车密度表等指标进行实时分析,为客流预测提供依据。
关键词
铁路客运
大
数据
分布式
数据存储平台
客流分析
Greenplum
Vmware
平台
Keywords
railway passenger transport
big data
distributed data storage platform
passenger-flow analysis
Greenplum
Vmware platform
分类号
U293 [交通运输工程—交通运输规划与管理]
TP391 [自动化与计算机技术—计算机应用技术]
在线阅读
下载PDF
职称材料
题名
作者
出处
发文年
被引量
操作
1
异构Hadoop集群下自适应平衡数据存储的大数据放置策略
张少辉
张中军
于来行
《现代电子技术》
北大核心
2016
3
在线阅读
下载PDF
职称材料
2
面向铁路客运大数据的客流分析研究及应用
罗明
《中国铁路》
2020
4
在线阅读
下载PDF
职称材料
已选择
0
条
导出题录
引用分析
参考文献
引证文献
统计分析
检索结果
已选文献
上一页
1
下一页
到第
页
确定
用户登录
登录
IP登录
使用帮助
返回顶部
