期刊导航
期刊开放获取
上海教育软件发展有限公..
期刊文献
+
任意字段
题名或关键词
题名
关键词
文摘
作者
第一作者
机构
刊名
分类号
参考文献
作者简介
基金资助
栏目信息
任意字段
题名或关键词
题名
关键词
文摘
作者
第一作者
机构
刊名
分类号
参考文献
作者简介
基金资助
栏目信息
检索
高级检索
期刊导航
共找到
3
篇文章
<
1
>
每页显示
20
50
100
已选择
0
条
导出题录
引用分析
参考文献
引证文献
统计分析
检索结果
已选文献
显示方式:
文摘
详细
列表
相关度排序
被引量排序
时效性排序
网格中数据并行流水线的任务指派优化
1
作者
王庆江
桂小林
郑守淇
《西安交通大学学报》
EI
CAS
CSCD
北大核心
2004年第8期771-774,共4页
为了缩短网格中数据并行流水线在吞吐率受限下的延迟,提出了一种优化任务指派的算法.在一个流水线中,每个任务都可以是一个数据并行程序.当多个任务被指派到同一个并行系统时,假设每个任务排他地使用一组处理机.根据优化目的,优化过程...
为了缩短网格中数据并行流水线在吞吐率受限下的延迟,提出了一种优化任务指派的算法.在一个流水线中,每个任务都可以是一个数据并行程序.当多个任务被指派到同一个并行系统时,假设每个任务排他地使用一组处理机.根据优化目的,优化过程可分成连续的两个阶段,即提高吞吐率和缩短吞吐率受限下的延迟.对不同的优化阶段,用不同的启发式算法确定一个并行系统中每个任务的处理机数.改派任一任务都会使流水线的性能发生变化,性能提高的幅度被称为任务优先级.通过重复改派优先级最高的任务,流水线的性能可迅速提高,这在仿真实验中已得到了证实.
展开更多
关键词
网格
流水线
数据并行流水线
吞吐率
延迟
任务指派
在线阅读
下载PDF
职称材料
数据并行流水线网格调度的一种优化方法
2
作者
张琳
王庆江
《计算机工程》
CAS
CSCD
北大核心
2007年第11期82-84,共3页
为改进计算网格上数据并行流水线的性能,用模拟退火算法优化调度,用一个实验性方法确定初始控制参数,用一个随机方法选择下一个调度方案。调整最佳调度方案的稳定次数,可实现优化开销和优化效果之间的折中。实验显示,该文的模拟退火可...
为改进计算网格上数据并行流水线的性能,用模拟退火算法优化调度,用一个实验性方法确定初始控制参数,用一个随机方法选择下一个调度方案。调整最佳调度方案的稳定次数,可实现优化开销和优化效果之间的折中。实验显示,该文的模拟退火可有效优化流水线的调度。
展开更多
关键词
网格
调度
数据并行流水线
模拟退火
在线阅读
下载PDF
职称材料
近数据计算下键值存储中Compaction并行优化方法
被引量:
1
3
作者
孙辉
娄本冬
+2 位作者
黄建忠
赵雨虹
符松
《计算机研究与发展》
EI
CSCD
北大核心
2022年第3期597-616,共20页
大规模非结构化数据的爆炸式增长给传统关系型数据库带来了极大的挑战.基于日志结构合并树(log-structured merge tree,LSM-tree)的键值存储系统已被广泛应用,并起到重要的作用,原因在于基于LSM-tree的键值存储能够将随机写转化为顺序写...
大规模非结构化数据的爆炸式增长给传统关系型数据库带来了极大的挑战.基于日志结构合并树(log-structured merge tree,LSM-tree)的键值存储系统已被广泛应用,并起到重要的作用,原因在于基于LSM-tree的键值存储能够将随机写转化为顺序写,从而提升性能.然而,LSM-tree键值存储也存在一些性能问题.一方面,键值存储利用compaction操作更新数据,保持系统平衡,但造成严重的写放大问题.另一方面,以传统计算为中心的架构下,compaction操作带来大量的数据传输,影响了系统性能.以数据为中心的近数据计算模型(near-data processing,NDP)为基础,利用该模型下主机端与近数据计算使能设备端的并行资源,提出基于系统并行与流水线并行的compaction优化方法(collaborative parallel compaction optimization for LSM-tree key-value stores,CoPro).当处理compaction操作时,CoPro主机端与NDP设备端协同执行compaction卸载任务.此外,进一步提出基于决策组件的CoPro+,根据系统资源变化以及负载键值对中值大小的变化来动态调整并行度,使NDP架构中计算资源的使用更加高效.在搭建的硬件平台上验证了CoPro的有效性.
展开更多
关键词
日志归并树
键值存储
近
数据
计算
任务卸载
数据
-
流水线
并行
在线阅读
下载PDF
职称材料
题名
网格中数据并行流水线的任务指派优化
1
作者
王庆江
桂小林
郑守淇
机构
西安交通大学电子与信息工程学院
出处
《西安交通大学学报》
EI
CAS
CSCD
北大核心
2004年第8期771-774,共4页
基金
国家高技术研究发展计划资助项目 (2 0 0 1AA1 1 1 0 81 )
国家自然科学基金资助项目 (60 2 73 0 85)
文摘
为了缩短网格中数据并行流水线在吞吐率受限下的延迟,提出了一种优化任务指派的算法.在一个流水线中,每个任务都可以是一个数据并行程序.当多个任务被指派到同一个并行系统时,假设每个任务排他地使用一组处理机.根据优化目的,优化过程可分成连续的两个阶段,即提高吞吐率和缩短吞吐率受限下的延迟.对不同的优化阶段,用不同的启发式算法确定一个并行系统中每个任务的处理机数.改派任一任务都会使流水线的性能发生变化,性能提高的幅度被称为任务优先级.通过重复改派优先级最高的任务,流水线的性能可迅速提高,这在仿真实验中已得到了证实.
关键词
网格
流水线
数据并行流水线
吞吐率
延迟
任务指派
Keywords
grid
pipeline
data parallel pipeline
throughput
latency
task assignment
分类号
TP393 [自动化与计算机技术—计算机应用技术]
在线阅读
下载PDF
职称材料
题名
数据并行流水线网格调度的一种优化方法
2
作者
张琳
王庆江
机构
河南财经学院计算中心
中国海洋大学计算机科学系
出处
《计算机工程》
CAS
CSCD
北大核心
2007年第11期82-84,共3页
文摘
为改进计算网格上数据并行流水线的性能,用模拟退火算法优化调度,用一个实验性方法确定初始控制参数,用一个随机方法选择下一个调度方案。调整最佳调度方案的稳定次数,可实现优化开销和优化效果之间的折中。实验显示,该文的模拟退火可有效优化流水线的调度。
关键词
网格
调度
数据并行流水线
模拟退火
Keywords
Grid
Scheduling
Data parallel pipeline
Simulated annealing
分类号
TP393 [自动化与计算机技术—计算机应用技术]
在线阅读
下载PDF
职称材料
题名
近数据计算下键值存储中Compaction并行优化方法
被引量:
1
3
作者
孙辉
娄本冬
黄建忠
赵雨虹
符松
机构
安徽大学计算机科学与技术学院
华中科技大学武汉光电国家研究中心
中国科学院信息工程研究所
北德克萨斯大学计算机科学与工程系
出处
《计算机研究与发展》
EI
CSCD
北大核心
2022年第3期597-616,共20页
基金
安徽高校协同创新项目(GXXT-2019-007)
计算机体系结构国家重点实验室(中国科学院计算技术研究所)开放课题(CARCH201915)
国家自然科学基金项目(62072001,61702004,61572209)。
文摘
大规模非结构化数据的爆炸式增长给传统关系型数据库带来了极大的挑战.基于日志结构合并树(log-structured merge tree,LSM-tree)的键值存储系统已被广泛应用,并起到重要的作用,原因在于基于LSM-tree的键值存储能够将随机写转化为顺序写,从而提升性能.然而,LSM-tree键值存储也存在一些性能问题.一方面,键值存储利用compaction操作更新数据,保持系统平衡,但造成严重的写放大问题.另一方面,以传统计算为中心的架构下,compaction操作带来大量的数据传输,影响了系统性能.以数据为中心的近数据计算模型(near-data processing,NDP)为基础,利用该模型下主机端与近数据计算使能设备端的并行资源,提出基于系统并行与流水线并行的compaction优化方法(collaborative parallel compaction optimization for LSM-tree key-value stores,CoPro).当处理compaction操作时,CoPro主机端与NDP设备端协同执行compaction卸载任务.此外,进一步提出基于决策组件的CoPro+,根据系统资源变化以及负载键值对中值大小的变化来动态调整并行度,使NDP架构中计算资源的使用更加高效.在搭建的硬件平台上验证了CoPro的有效性.
关键词
日志归并树
键值存储
近
数据
计算
任务卸载
数据
-
流水线
并行
Keywords
log-structured merge tree(LSM-tree)
key-value store
near-data processing(NDP)
task offloading
data-pipeline parallelism
分类号
TP391 [自动化与计算机技术—计算机应用技术]
在线阅读
下载PDF
职称材料
题名
作者
出处
发文年
被引量
操作
1
网格中数据并行流水线的任务指派优化
王庆江
桂小林
郑守淇
《西安交通大学学报》
EI
CAS
CSCD
北大核心
2004
0
在线阅读
下载PDF
职称材料
2
数据并行流水线网格调度的一种优化方法
张琳
王庆江
《计算机工程》
CAS
CSCD
北大核心
2007
0
在线阅读
下载PDF
职称材料
3
近数据计算下键值存储中Compaction并行优化方法
孙辉
娄本冬
黄建忠
赵雨虹
符松
《计算机研究与发展》
EI
CSCD
北大核心
2022
1
在线阅读
下载PDF
职称材料
已选择
0
条
导出题录
引用分析
参考文献
引证文献
统计分析
检索结果
已选文献
上一页
1
下一页
到第
页
确定
用户登录
登录
IP登录
使用帮助
返回顶部