期刊文献+
共找到21篇文章
< 1 2 >
每页显示 20 50 100
数据密集型计算编程模型研究进展 被引量:39
1
作者 王鹏 孟丹 +1 位作者 詹剑锋 涂碧波 《计算机研究与发展》 EI CSCD 北大核心 2010年第11期1993-2002,共10页
作为一种新兴的计算模式,云计算受到了学术界和产业界的广泛关注.云计算以互联网服务和应用为中心,服务提供者需要存储和分析海量数据.为了能够低成本高效率地处理Web量级数据,主要的互联网公司都在由商品化服务器组成的大规模集群系统... 作为一种新兴的计算模式,云计算受到了学术界和产业界的广泛关注.云计算以互联网服务和应用为中心,服务提供者需要存储和分析海量数据.为了能够低成本高效率地处理Web量级数据,主要的互联网公司都在由商品化服务器组成的大规模集群系统上研发了分布式编程系统.编程模型可以降低开发人员在大规模集群上编程的难度,并让程序充分利用集群资源,但设计这样的编程模型面临巨大挑战.首先说明了数据密集型计算的特点,并指出了编程模型要解决的基本问题;接着深入介绍了国际上代表性的编程模型,并对这些编程模型的特点进行了比较和分析;最后对当前所面临的问题和今后的发展趋势进行了总结和展望. 展开更多
关键词 计算 数据密集型计算 编程模型 数据并行 海量数据处理 MAPREDUCE
在线阅读 下载PDF
面向新型处理器的数据密集型计算 被引量:4
2
作者 王鹤澎 王宏志 +3 位作者 李佳宁 孔欣欣 李建中 高宏 《软件学报》 EI CSCD 北大核心 2016年第8期2048-2067,共20页
近年来,随着数据量的不断增大,数据密集型计算任务变得日益繁重.如何能够快速、高效地实现在大规模数据集上的计算,已成为数据密集型计算的主要研究方向.最近几年,研究人员利用新型的硬件处理器对数据密集型计算进行加速处理,并针对不... 近年来,随着数据量的不断增大,数据密集型计算任务变得日益繁重.如何能够快速、高效地实现在大规模数据集上的计算,已成为数据密集型计算的主要研究方向.最近几年,研究人员利用新型的硬件处理器对数据密集型计算进行加速处理,并针对不同新型处理器的特点,设计了不同形式的加速处理算法.主要对新型硬件处理器基于数据密集型计算的研究进行了综述.首先概述了新型硬件处理器的特点;然后,分别对新型处理器FPGA和GPU等硬件进行性能分析,并分析了每种处理器对数据密集型计算的效果;最后提出了进一步的研究方向. 展开更多
关键词 FPGA GPU CPU 数据密集型计算
在线阅读 下载PDF
一种面向数据密集型计算环境的聚类算法 被引量:3
3
作者 钱鑫 张龙波 +2 位作者 田爱奎 邓齐志 汪金苗 《济南大学学报(自然科学版)》 CAS 北大核心 2013年第1期11-15,共5页
针对数据密集型计算环境下数据具有海量、分布、异构、高速变化等特点,分析传统的基于密度的分布式聚类(Density Base Distributed Clustering,DBDC)算法,借助MapReduce编程模型,提出一种新的分布式聚类算法,采用局部和全局的方式处理... 针对数据密集型计算环境下数据具有海量、分布、异构、高速变化等特点,分析传统的基于密度的分布式聚类(Density Base Distributed Clustering,DBDC)算法,借助MapReduce编程模型,提出一种新的分布式聚类算法,采用局部和全局的方式处理海量、异构数据,解决具有以上特点的数据密集型计算环境下数据的分析挖掘问题。得出算法的复杂度为O((nlog2n)/p),实验验证在数据量与节点数变化时算法具有较高的稳定性和可伸缩性,与原算法对比该算法具有较高的准确度。 展开更多
关键词 数据密集型计算 分布式聚类 基于密度的分布式聚类算法
在线阅读 下载PDF
面向海量数据处理的数据密集型计算发展研究 被引量:4
4
作者 李亢 刘东 《四川兵工学报》 CAS 2015年第7期93-96,共4页
随着信息技术的发展和普及,当今社会的信息量呈现出爆炸式增长的趋势,数据信息在无论是在量上还是在增长速率上均相当惊人,数据密集型计算应运而生。数据密集型计算是指获取、存储和管理大规模数据集,并基于这些数据集进行计算和分析。... 随着信息技术的发展和普及,当今社会的信息量呈现出爆炸式增长的趋势,数据信息在无论是在量上还是在增长速率上均相当惊人,数据密集型计算应运而生。数据密集型计算是指获取、存储和管理大规模数据集,并基于这些数据集进行计算和分析。概述了数据密集型计算的概念和特点,研究了数据密集型计算的数据并行和数据本地性的两个基本原理及应用情况,分析了数据密集型计算最新技术的国内外研究现状与发展趋势。 展开更多
关键词 数据密集型计算 海量数据 数据探索模式
在线阅读 下载PDF
资源失配时低代价的数据与计算密集型服务重配
5
作者 周长兵 李小翠 +1 位作者 王煜炜 王亚沙 《计算机学报》 EI CAS CSCD 北大核心 2024年第9期2035-2058,共24页
随着边缘计算的广泛应用,近年来在网络边缘侧激增了一些延迟敏感的用户请求,这些应用对边缘网络中物联网设备提供的资源提出了较高的服务质量(Quality of Service,QoS)需求,例如严格的地理空间约束、时延/能量及其他资源约束.物联网设... 随着边缘计算的广泛应用,近年来在网络边缘侧激增了一些延迟敏感的用户请求,这些应用对边缘网络中物联网设备提供的资源提出了较高的服务质量(Quality of Service,QoS)需求,例如严格的地理空间约束、时延/能量及其他资源约束.物联网设备提供的功能通常被封装为运行在边缘节点上的服务,用户请求可以通过组合数据和/或计算密集型的物联网服务来实现.考虑到物联网设备的资源稀缺性以及用户请求的在线持续部署和潜在长期执行特征,边缘服务运行期间对物联网设备资源的占用和释放导致边缘网络中资源动态变化.由于物联网设备的资源通常难以得到有效补充,且消耗差异可能较大,有些设备可能会过载,导致在当前时间点适配的物联网服务,在随后时间点可能难以适配用户请求,并导致QoS降级.针对边缘网络高负载时新请求持续部署导致特定强约束难以满足的挑战,本文开展资源失配时低代价的服务重配研究,提出了一种资源高效的服务重配方法,旨在通过服务迁移技术重调度物联网设备所提供的服务,以满足更多具有一定QoS约束的用户请求.基于上海电信基站数据集进行了大量实验,实例验证本文方法的有效性.实验结果表明,本文所提方法在满足用户服务请求时延约束、降低物联网设备能量消耗、提高边缘网络资源利用效益等方面表现均优于对比技术. 展开更多
关键词 数据与计算密集型服务 资源利用效益 服务重配 服务迁移 边缘网络
在线阅读 下载PDF
一种适应数据与计算密集型任务的私有云系统实现研究 被引量:18
6
作者 杨志豪 赵太银 +1 位作者 姚兴苗 李磊 《计算机应用研究》 CSCD 北大核心 2011年第2期621-624,共4页
与公有云计算相比,针对数据与计算双重密集型任务的私有云计算系统对计算效率和系统管理效率提出了更高的要求,目前的公有云计算系统显得过于复杂和繁琐,因此需要一种简便易用的能够适应数据与计算密集型任务的私有云计算系统实现。借... 与公有云计算相比,针对数据与计算双重密集型任务的私有云计算系统对计算效率和系统管理效率提出了更高的要求,目前的公有云计算系统显得过于复杂和繁琐,因此需要一种简便易用的能够适应数据与计算密集型任务的私有云计算系统实现。借鉴公有云计算的相关理论和实现方法,提出了一种针对数据与计算双重密集型任务的私有云计算系统实现方案。该方案通过作业文件描述用户的计算任务,确定计算任务的计算模型和计算的输入输出文件;针对私有云的特点,简化Google云计算系统的MapReduce并行处理框架,得到更加直观的数据计算模型;自动连接计算数据流,使该方案更加精简和适应处理数据与计算双重密集型任务。实验结果表明:该方案能够减少额外的计算消耗,处理速度能得到显著提升,有很高的实用性。 展开更多
关键词 数据与计算双重密集型任务 私有云 计算 并行计算
在线阅读 下载PDF
计算密集型体系集成DDR SDRAM控制器设计 被引量:3
7
作者 江先阳 刘新春 +2 位作者 张佩珩 孙凝晖 徐志伟 《计算机工程与科学》 CSCD 2006年第3期96-97,101,共3页
文章介绍了计算密集型体系解决存储器访问瓶颈的研究趋势。针对计算密集型体系的高数据访存需求,提出并在FPGA上实现了一种集成的DDR SDRAM控制器,其关键部分为固化初始化系列和专有的定制系统总线。仿真结果和分析表明,该控制器解决了... 文章介绍了计算密集型体系解决存储器访问瓶颈的研究趋势。针对计算密集型体系的高数据访存需求,提出并在FPGA上实现了一种集成的DDR SDRAM控制器,其关键部分为固化初始化系列和专有的定制系统总线。仿真结果和分析表明,该控制器解决了计算密集型体系的数据访问瓶颈。 展开更多
关键词 计算密集型体系 DDR SDRAM控制器 FPGA 仿真
在线阅读 下载PDF
边缘环境下计算密集型任务调度研究综述 被引量:10
8
作者 刘炎培 朱运静 +2 位作者 宾艳茹 陈宁宁 王丽萍 《计算机工程与应用》 CSCD 北大核心 2022年第20期28-42,共15页
随着移动设备数量的急剧增长及计算密集型应用如人脸识别、车联网以及虚拟现实等的广泛使用,为了实现满足用户QoS请求的任务和协同资源的最优匹配,使用合理的计算密集型应用的任务调度方案,从而解决边缘云中心时延长、成本高、负载不均... 随着移动设备数量的急剧增长及计算密集型应用如人脸识别、车联网以及虚拟现实等的广泛使用,为了实现满足用户QoS请求的任务和协同资源的最优匹配,使用合理的计算密集型应用的任务调度方案,从而解决边缘云中心时延长、成本高、负载不均衡和资源利用率低等问题。阐述了边缘计算环境下计算密集型应用的任务调度框架、执行过程、应用场景及性能指标。从时间和成本、能耗和资源利用率以及负载均衡和吞吐量为优化目标的边缘计算环境下计算密集型应用的任务调度策略进行了对比和分析,并归纳出目前这些策略的优缺点及适用场景。通过分析5G环境下基于SDN的边缘计算架构,提出了基于SDN环境下的边缘计算密集型数据包任务调度策略、基于深度强化学习的计算密集型应用的任务调度策略和5G IoV网络中多目标跨层任务调度策略。从容错调度、动态微服务调度、人群感知调度以及安全和隐私等几个方面总结和归纳了目前边缘计算环境中任务调度所面临的挑战。 展开更多
关键词 边缘计算 计算密集型 任务调度 软件定义网络(SDN) 调度策略
在线阅读 下载PDF
通信密集环境下基于内存利用率的预计算方法 被引量:2
9
作者 刘强 董小社 +1 位作者 陈衡 王寅峰 《西安交通大学学报》 EI CAS CSCD 北大核心 2017年第10期59-64,共6页
针对通信密集型图计算环境下原静态最大消息数阈值方法由于内存不足导致的频繁低效I/O问题,提出了一种基于内存利用率的预计算方法。该方法利用了图应用的计算满足交换律和结合律的特点,根据当前进程的内存利用率判断是否将本轮超步通... 针对通信密集型图计算环境下原静态最大消息数阈值方法由于内存不足导致的频繁低效I/O问题,提出了一种基于内存利用率的预计算方法。该方法利用了图应用的计算满足交换律和结合律的特点,根据当前进程的内存利用率判断是否将本轮超步通信过程中的部分消息进行预计算,同时在预计算过程中使用细粒度锁以增大预计算线程的并发度;在下轮超步的正常计算时合并上轮的预计算结果,实现了通信和计算的重叠,达到减少作业响应时间和磁盘I/O开销的目的。实验结果表明,在通信密集场景下,该方法在性能和I/O开销上均优于已有的MMT方法,作业响应时间减少了5.9%~79.0%,同时计算过程中的磁盘开销减少了9.99%~79.87%。 展开更多
关键词 通信密集型计算 内存利用率 计算
在线阅读 下载PDF
多核混合可重构计算系统MRCS的设计 被引量:1
10
作者 倪伟 邵响 +3 位作者 张溯 宋宇鲲 杨延辉 卜冀春 《电子测量与仪器学报》 CSCD 北大核心 2015年第2期172-178,共7页
设计了一种面向计算密集型应用的多核混合架构可重构计算系统MRCS。其可重构处理器中的可重构阵列计算单元负责密集规则的运算,浮点处理器负责离散运算,配合灵活的本地缓冲,有效地提高了多核可重构计算系统对算法的适应性。实现了一个... 设计了一种面向计算密集型应用的多核混合架构可重构计算系统MRCS。其可重构处理器中的可重构阵列计算单元负责密集规则的运算,浮点处理器负责离散运算,配合灵活的本地缓冲,有效地提高了多核可重构计算系统对算法的适应性。实现了一个能够稳定地运行在100 MHz的基于FPGA的MRCS原型,并通过分别映射大维度浮点矩阵乘法、IDCT算法和运动估计算法进行性能验证。实验结果表明MRCS具有更高的计算效率和灵活性。 展开更多
关键词 可重构处理器 MRCS 多核可重构计算 密集型计算
在线阅读 下载PDF
图像Laplace变换在异构多核工程科学计算加速协处理器上的实现 被引量:1
11
作者 贺章擎 黄威 +1 位作者 戴葵 郑朝霞 《计算机应用》 CSCD 北大核心 2014年第2期369-372,376,共5页
基于自主研发的新颖异构多核工程科学计算加速协处理器(ESCA)体系结构,实现了图像Laplace变换算法。针对ESCA架构特点,采用子字并行计算和访存延迟隐藏等机制,进行了一系列并行算法优化,并在四核ESCA处理器原型上对图像Laplace变换算法... 基于自主研发的新颖异构多核工程科学计算加速协处理器(ESCA)体系结构,实现了图像Laplace变换算法。针对ESCA架构特点,采用子字并行计算和访存延迟隐藏等机制,进行了一系列并行算法优化,并在四核ESCA处理器原型上对图像Laplace变换算法的进行了性能评测。实验结果表明,对于计算密集型计算任务,ESCA处理器具有良好的计算加速效果。 展开更多
关键词 异构多核 协处理器 计算密集型 LAPLACE变换 并行计算
在线阅读 下载PDF
一种弱C/S架构的计算迁移模型的设计与实现 被引量:6
12
作者 陈泽堃 李强 逯峻雨 《计算机应用研究》 CSCD 北大核心 2018年第5期1421-1425,1449,共6页
近年来提出了许多计算迁移模型,但这些模型都存在部署困难、耦合性高等问题,针对这些问题提出了一种弱C/S架构的计算迁移模型。该模型开发了一个面向所有第三方应用的服务端,为第三方应用提供通用的计算服务。该模型不仅部署起来简单便... 近年来提出了许多计算迁移模型,但这些模型都存在部署困难、耦合性高等问题,针对这些问题提出了一种弱C/S架构的计算迁移模型。该模型开发了一个面向所有第三方应用的服务端,为第三方应用提供通用的计算服务。该模型不仅部署起来简单便捷,而且服务端和智能手机端低耦合的特性使得该模型对第三方的应用开发人员十分友好。实验结果表明,该模型能有效提升计算密集型应用的执行效率。 展开更多
关键词 计算迁移 低耦合 计算密集型应用 弱C/S架构
在线阅读 下载PDF
网格技术在电信中的应用研究 被引量:1
13
作者 季一木 王汝传 王海艳 《电信科学》 北大核心 2006年第2期15-19,共5页
网格技术当前已经成为研究的热点,前期的研究多数为理论研究,但是,中国教育网格支撑平台(CHI-NAGRIDSUPPORTINGPLATFORM,CGSP)发布之后,国内外对网格技术的商业应用研究再次掀起高潮。本文首先对网格技术应用到电信业后对网络层次结构... 网格技术当前已经成为研究的热点,前期的研究多数为理论研究,但是,中国教育网格支撑平台(CHI-NAGRIDSUPPORTINGPLATFORM,CGSP)发布之后,国内外对网格技术的商业应用研究再次掀起高潮。本文首先对网格技术应用到电信业后对网络层次结构模型的影响和网格技术的具体应用做了理论分析,然后通过最能体现网格特点的电信业的两个应用例子验证了部分理论。 展开更多
关键词 网格计算 电信网格 CPU密集型计算 数据密集型计算
在线阅读 下载PDF
消息代理机制下的MapReduce数据流优化 被引量:5
14
作者 葛君伟 蒋仙 方义秋 《计算机工程与应用》 CSCD 2013年第5期120-122,262,共4页
MapReduce编程模型是广泛应用于云计算环境下处理海量数据的一种并行计算框架。然而该框架下的面向数据密集型计算,集群节点间的数据传输依赖性较强,造成节点间的消息处理负载过重。提出基于消息代理机制的MapReduce改进模型,优化数据... MapReduce编程模型是广泛应用于云计算环境下处理海量数据的一种并行计算框架。然而该框架下的面向数据密集型计算,集群节点间的数据传输依赖性较强,造成节点间的消息处理负载过重。提出基于消息代理机制的MapReduce改进模型,优化数据流。经实验数据表明,基于消息代理机制的MapReduce框架能提高数据密集型应用上的负载均衡。 展开更多
关键词 消息代理 MAPREDUCE 数据密集型计算 数据流
在线阅读 下载PDF
求解黑箱优化问题的动态模式跟踪抽样算法 被引量:4
15
作者 粟华 谷良贤 龚春林 《计算机集成制造系统》 EI CSCD 北大核心 2013年第7期1553-1558,共6页
针对当前复杂工业领域设计过程中存在的计算密集型黑箱优化问题,提出一种改进的动态模式跟踪抽样算法。算法基于线性样条函数进行全局近似,通过随机抽样过程产生逐步逼近全局最优区域的设计点,并利用二次响应面函数进行全局收敛判定。... 针对当前复杂工业领域设计过程中存在的计算密集型黑箱优化问题,提出一种改进的动态模式跟踪抽样算法。算法基于线性样条函数进行全局近似,通过随机抽样过程产生逐步逼近全局最优区域的设计点,并利用二次响应面函数进行全局收敛判定。引入动态加速因子来增强算法的全局搜索能力和函数适应性,并采用改进的修正复相关系数进行动态加速因子更新和响应面拟合精度判定。标准测试函数表明,相比于遗传算法和模拟退火等启发式算法,动态模式跟踪抽样算法在减少目标函数评估次数和收敛成功率上均具有较大的优势。 展开更多
关键词 模式跟踪抽样算法 计算密集型黑箱函数 全局优化 随机抽样 全局近似 二次响应面 产品设计
在线阅读 下载PDF
可重构阵列DSP结构ReMAP 被引量:2
16
作者 王新安 叶兆华 +1 位作者 戴鹏 周丹 《深圳大学学报(理工版)》 EI CAS 北大核心 2010年第1期16-20,共5页
为满足多媒体处理等领域要求芯片高性能,且开发周期短的需求,提出一种可重构阵列DSP的结构——ReMAP.该阵列结构由多个运算单元、存储器和交换开关等级联组成,易于扩展和配置.通过把算法分割映射到多个运算单元之中,提高芯片对计算密集... 为满足多媒体处理等领域要求芯片高性能,且开发周期短的需求,提出一种可重构阵列DSP的结构——ReMAP.该阵列结构由多个运算单元、存储器和交换开关等级联组成,易于扩展和配置.通过把算法分割映射到多个运算单元之中,提高芯片对计算密集型任务的执行效率.在SMIC 0.18μm工艺下完成了ReMAP芯片的原型验证,包含16个ALU单元.测试结果表明,该结构能以较高效率完成如SAD和DCT等视频处理相关算法. 展开更多
关键词 计算机工程 可重构阵列处理器 计算密集型处理器 数字信号处理 多媒体处理
在线阅读 下载PDF
网格作业完工时间与作业分割粒度的关系 被引量:1
17
作者 李荣胜 赵文峰 徐惠民 《计算机应用》 CSCD 北大核心 2011年第2期530-532,547,共4页
对可分割的计算密集型大型作业在并行且不间断运行情况下的完工时间与作业分割粒度之间的关系进行研究。首先分析了子作业之间无通信和有通信两种情况下可分割计算密集型大型作业的完工时间和分割粒度的关系,然后对可分割计算密集型大... 对可分割的计算密集型大型作业在并行且不间断运行情况下的完工时间与作业分割粒度之间的关系进行研究。首先分析了子作业之间无通信和有通信两种情况下可分割计算密集型大型作业的完工时间和分割粒度的关系,然后对可分割计算密集型大型作业在专用网格资源上的完工时间与分割粒度的关系进行仿真。仿真结果显示,大型作业的完工时间随着分割粒度的增大先减小后增大;当单个子作业的计算时间和通信时间之比增大时,作业的分割粒度可以更细,作业完工时间的最小值减小。因此完工时间最优的作业分割粒度不能过粗或过细。 展开更多
关键词 完工时间 分割粒度 计算密集型 作业调度 网格计算
在线阅读 下载PDF
数据层可配置任务生成方法及其应用研究 被引量:1
18
作者 刘明铭 程仁洪 《计算机工程》 CAS CSCD 2013年第4期27-31,共5页
为提高数据层的任务处理性能,提出一种可配置任务生成方法。通过分析数据库运行日志和跟踪信息,按照负载时空特性生成数据层任务处理脚本,并获取对应的资源消耗模式和关键任务处理性能。测试结果表明,该方法可以模拟实际应用系统的执行... 为提高数据层的任务处理性能,提出一种可配置任务生成方法。通过分析数据库运行日志和跟踪信息,按照负载时空特性生成数据层任务处理脚本,并获取对应的资源消耗模式和关键任务处理性能。测试结果表明,该方法可以模拟实际应用系统的执行情况,由此获得服务器资源占用率,该资源占用率与实际资源占用率之间的误差可线性消除,为数据库服务器容量规划、存储结构设计、关键功能设计、性能优化,以及云计算平台资源实现和计算能力按需优化配置提供依据。 展开更多
关键词 负载特性 资源消耗 承载能力 容量规划 资源整合 数据与计算双重密集型任务
在线阅读 下载PDF
物联网感知数据边缘卸载机制研究
19
作者 袁培燕 耿丽娟 张豪 《计算机工程与科学》 CSCD 北大核心 2021年第3期435-441,共7页
物联网的普及与增强现实等计算密集型应用产生的大量数据,给当前骨干网络带来沉重的流量负担。为了提升用户体验,需要将感知数据迁移到距离用户更近的边缘服务器中。考虑到边缘服务器的资源相对有限,如何确定适当的数据卸载比例是一个... 物联网的普及与增强现实等计算密集型应用产生的大量数据,给当前骨干网络带来沉重的流量负担。为了提升用户体验,需要将感知数据迁移到距离用户更近的边缘服务器中。考虑到边缘服务器的资源相对有限,如何确定适当的数据卸载比例是一个无法回避的问题。首先,将该问题表述为一个包含延迟和能量消耗2个关键性能指标的序列二次规划问题。其次,利用有效集算法进行求解,得出在一定计算卸载能耗约束下的最佳工作负载分配比例。最后,通过Matlab仿真实验,验证了在任务负载到达率远远大于边缘服务器处理速率时,所提方案具有最佳的延迟性能。 展开更多
关键词 计算密集型 序列二次规划 延迟 能量
在线阅读 下载PDF
N体问题的FPGA求解和设计方法
20
作者 傅丽丽 曾国荪 《计算机科学》 CSCD 北大核心 2010年第11期302-306,共5页
N体问题是一个经典动力学问题,在多个领域得到广泛的应用。但随着规模的增大,对求解计算性能的要求成为其研究的主要障碍。当前,FPGA可重构技术由于具有硬件可编程结构和高度并行处理能力而成为高性能计算关注的热点。现以FPGA加速求解... N体问题是一个经典动力学问题,在多个领域得到广泛的应用。但随着规模的增大,对求解计算性能的要求成为其研究的主要障碍。当前,FPGA可重构技术由于具有硬件可编程结构和高度并行处理能力而成为高性能计算关注的热点。现以FPGA加速求解N体问题为例,阐述一种新型的求解计算密集型任务的方法。 展开更多
关键词 N体问题 FPGA 计算密集型 高性能计算
在线阅读 下载PDF
上一页 1 2 下一页 到第
使用帮助 返回顶部