期刊导航
期刊开放获取
上海教育软件发展有限公..
期刊文献
+
任意字段
题名或关键词
题名
关键词
文摘
作者
第一作者
机构
刊名
分类号
参考文献
作者简介
基金资助
栏目信息
任意字段
题名或关键词
题名
关键词
文摘
作者
第一作者
机构
刊名
分类号
参考文献
作者简介
基金资助
栏目信息
检索
高级检索
期刊导航
共找到
3
篇文章
<
1
>
每页显示
20
50
100
已选择
0
条
导出题录
引用分析
参考文献
引证文献
统计分析
检索结果
已选文献
显示方式：
文摘
详细
列表
相关度排序
被引量排序
时效性排序
异构环境下平滑加权轮询Reduce任务调度算法研究
被引量：
3
1
作者
黄伟建
贾孟玉
黄亮
《现代电子技术》
北大核心
2020年第23期139-142,共4页
传统MapReduce在处理倾斜数据时会造成负载不均衡,降低MapReduce框架的执行效率。虽然利用贪心算法分区减轻了MapReduce应用中的数据倾斜,但是忽略了Reduce异构性,因为MapReduce的计算环境通常是异构的,即使中间数据没有倾斜,由于计算...
传统MapReduce在处理倾斜数据时会造成负载不均衡,降低MapReduce框架的执行效率。虽然利用贪心算法分区减轻了MapReduce应用中的数据倾斜,但是忽略了Reduce异构性,因为MapReduce的计算环境通常是异构的,即使中间数据没有倾斜,由于计算能力不同,任务在不同节点上的执行时间也是不同的。为了避免异构性导致Reduce性能下降的问题,提出一种在异构环境下动态平滑加权轮询调度算法。该算法根据节点的计算能力和数据本地性这两个因素选取Reduce计算节点来提高Reduce任务执行效率,还进一步将优化后的框架用于并行图像处理。实验结果表明,动态平滑加权轮询调度算法减少了Reduce跨节点传输的网络带宽,同时也减少了Reduce任务的执行时间。
展开更多
关键词
Reduce任务调度
负载均衡
异构集群
平滑
加权轮询算法
节点选取
并行图像处理
在线阅读
下载PDF
职称材料
改进加权轮询负载均衡算法研究
被引量：
9
2
作者
韩朋花
叶青
+1 位作者
姜晓明
陈占芳
《长春理工大学学报（自然科学版）》
2018年第3期131-134,共4页
针对云计算中负载均衡算法效率不高的问题,提出了一种改进的加权轮询算法来解决云计算中的负载均衡效率问题。首先根据服务器的负载状态得到负载因子的值,然后比较负载因子的值和阈值的关系,最后计算服务器的权值,根据计算的权值以轮询...
针对云计算中负载均衡算法效率不高的问题,提出了一种改进的加权轮询算法来解决云计算中的负载均衡效率问题。首先根据服务器的负载状态得到负载因子的值,然后比较负载因子的值和阈值的关系,最后计算服务器的权值,根据计算的权值以轮询的方式把任务分配给服务器。通过使用负载测试工具Load Runner进行仿真实验,结果表明改进后的加权轮询算法使系统平均响应时间更短,具有更好的可靠性,能够有效的解决云计算中负载均衡算法效率不高的问题。
展开更多
关键词
负载均衡
轮询
算法
加权轮询算法
在线阅读
下载PDF
职称材料
改进一致性哈希优化存储邮政数据算法的研究
被引量：
1
3
作者
李泽山
《现代电子技术》
北大核心
2024年第6期43-48,共6页
随着电子商务不断发展,邮政快递行业数据日益增多,传统方式对于邮政数据存储的理论与方法都已无法满足需求。基于此情况,使用一致性哈希算法来解决存储系统的横向弹性扩展,结合一致性哈希的虚拟节点与加权轮询算法优化Hadoop平台下分布...
随着电子商务不断发展,邮政快递行业数据日益增多,传统方式对于邮政数据存储的理论与方法都已无法满足需求。基于此情况,使用一致性哈希算法来解决存储系统的横向弹性扩展,结合一致性哈希的虚拟节点与加权轮询算法优化Hadoop平台下分布式文件系统(HDFS)存储策略,实现集群在同构与异构条件下的数据均衡效果。同时介绍集群节点数据转移思想,设计负载因子与系统自检周期,实现了集群动态权重的负载转移,并进行实验验证。实验结果表明,文章提出的改进算法与HDFS、普通一致性哈希相比,在不同条件下集群负载差值均有不同程度的提升,证明了该策略可以有效降低集群节点间负载差值。
展开更多
关键词
数据存储
一致性哈希
算法
加权轮询算法
分布式文件系统
负载均衡
异构集群
分配策略
在线阅读
下载PDF
职称材料
题名
异构环境下平滑加权轮询Reduce任务调度算法研究
被引量：
3
1
作者
黄伟建
贾孟玉
黄亮
机构
河北工程大学信息与电气工程学院
河北省信息安全测评中心
出处
《现代电子技术》
北大核心
2020年第23期139-142,共4页
基金
河北省自然科学基金项目:云计算中分布式Jobtracker节点模型的建立与优化(F2015402077)
河北省高等学校科学技术研究项目:基于复杂网络的空气质量动态分析和预测方法研究(QN2018073)。
文摘
传统MapReduce在处理倾斜数据时会造成负载不均衡,降低MapReduce框架的执行效率。虽然利用贪心算法分区减轻了MapReduce应用中的数据倾斜,但是忽略了Reduce异构性,因为MapReduce的计算环境通常是异构的,即使中间数据没有倾斜,由于计算能力不同,任务在不同节点上的执行时间也是不同的。为了避免异构性导致Reduce性能下降的问题,提出一种在异构环境下动态平滑加权轮询调度算法。该算法根据节点的计算能力和数据本地性这两个因素选取Reduce计算节点来提高Reduce任务执行效率,还进一步将优化后的框架用于并行图像处理。实验结果表明,动态平滑加权轮询调度算法减少了Reduce跨节点传输的网络带宽,同时也减少了Reduce任务的执行时间。
关键词
Reduce任务调度
负载均衡
异构集群
平滑
加权轮询算法
节点选取
并行图像处理
Keywords
Reduce task scheduling
load balancing
heterogeneous cluster
smooth weighted polling algorithm
node selection
parallel image processing
分类号
TN911.1-34 [电子电信—通信与信息系统]
TP311 [自动化与计算机技术—计算机软件与理论]
在线阅读
下载PDF
职称材料
题名
改进加权轮询负载均衡算法研究
被引量：
9
2
作者
韩朋花
叶青
姜晓明
陈占芳
机构
长春理工大学计算机科学技术学院
出处
《长春理工大学学报（自然科学版）》
2018年第3期131-134,共4页
文摘
针对云计算中负载均衡算法效率不高的问题,提出了一种改进的加权轮询算法来解决云计算中的负载均衡效率问题。首先根据服务器的负载状态得到负载因子的值,然后比较负载因子的值和阈值的关系,最后计算服务器的权值,根据计算的权值以轮询的方式把任务分配给服务器。通过使用负载测试工具Load Runner进行仿真实验,结果表明改进后的加权轮询算法使系统平均响应时间更短,具有更好的可靠性,能够有效的解决云计算中负载均衡算法效率不高的问题。
关键词
负载均衡
轮询
算法
加权轮询算法
Keywords
loading balancing；round robin；weighted round robin
分类号
TP301.6 [自动化与计算机技术—计算机系统结构]
在线阅读
下载PDF
职称材料
题名
改进一致性哈希优化存储邮政数据算法的研究
被引量：
1
3
作者
李泽山
机构
国家林业和草原局信息中心
出处
《现代电子技术》
北大核心
2024年第6期43-48,共6页
基金
内蒙古自然科学基金项目(2020MS06029)
内蒙古自然科学基金项目(2021LHMS06013)
+1 种基金
内蒙古自然科学基金项目(2020LH06009)
内蒙古自治区关键技术攻关计划项目(2020GG0165)。
文摘
随着电子商务不断发展,邮政快递行业数据日益增多,传统方式对于邮政数据存储的理论与方法都已无法满足需求。基于此情况,使用一致性哈希算法来解决存储系统的横向弹性扩展,结合一致性哈希的虚拟节点与加权轮询算法优化Hadoop平台下分布式文件系统(HDFS)存储策略,实现集群在同构与异构条件下的数据均衡效果。同时介绍集群节点数据转移思想,设计负载因子与系统自检周期,实现了集群动态权重的负载转移,并进行实验验证。实验结果表明,文章提出的改进算法与HDFS、普通一致性哈希相比,在不同条件下集群负载差值均有不同程度的提升,证明了该策略可以有效降低集群节点间负载差值。
关键词
数据存储
一致性哈希
算法
加权轮询算法
分布式文件系统
负载均衡
异构集群
分配策略
Keywords
data storage
consistent hashing algorithm
weighted polling algorithm
distributed file system
load balancing
heterogeneous clusters
allocation strategy
分类号
TN919-34 [电子电信—通信与信息系统]
TP319.9 [自动化与计算机技术—计算机软件与理论]
在线阅读
下载PDF
职称材料
题名
作者
出处
发文年
被引量
操作
1
异构环境下平滑加权轮询Reduce任务调度算法研究
黄伟建
贾孟玉
黄亮
《现代电子技术》
北大核心
2020
3
在线阅读
下载PDF
职称材料
2
改进加权轮询负载均衡算法研究
韩朋花
叶青
姜晓明
陈占芳
《长春理工大学学报（自然科学版）》
2018
9
在线阅读
下载PDF
职称材料
3
改进一致性哈希优化存储邮政数据算法的研究
李泽山
《现代电子技术》
北大核心
2024
1
在线阅读
下载PDF
职称材料
已选择
0
条
导出题录
引用分析
参考文献
引证文献
统计分析
检索结果
已选文献
上一页
1
下一页
到第
页
确定
用户登录
登录
IP登录
使用帮助
返回顶部
