检索结果-维普期刊中文期刊服务平台

应用并行计算框架提升地震数据处理效率分析被引量：6: 1; 作者祝树云朱旭光 +1 位作者颉冬莲张丽梅《石油地球物理勘探》 EI CSCD 北大核心 2011年第3期493-499,332,共7页; 并行计算框架系统将地震数据可分割处理的特点与现代计算机群多节点、多线程的并行运算能力巧妙结合,在提升常规地震处理运算效率、缩短地震资料处理周期方面发挥了显著作用。本文通过大量数据的测试,对影响并行计算框架运算效率的各种... 展开更多; 关键词并行计算框架并行效率并行加速比处理周期; 在线阅读下载PDF 职称材料

基于低代码思想的可视化并行计算框架设计被引量：1: 2; 作者杨冬亮焦淼韩源冬《信息技术与信息化》 2023年第12期21-24,共4页; 先进装备的新型信息处理平台采用高性能多核处理器为核心的一体化架构,来满足高性能和智能化需求。为了支撑密集计算任务,需要并行计算框架来解决多核同步、负载均衡、任务调度、数据分发等并行计算应用难题。然而,现有的并行计算框架... 展开更多; 关键词嵌入式操作系统并行计算框架模型驱动低代码可视化组件; 在线阅读下载PDF 职称材料

利用数据变换与并行运算的闭频繁项集挖掘方法被引量：12: 3; 作者党红恩赵尔平 +1 位作者刘炜雒伟群《湘潭大学自然科学学报》 CAS 2018年第1期119-122,共4页; 针对传统闭频繁项集(CFI)挖掘方法耗时长、效率低的问题,提出一种基于数据变换与并行运算(DTPC)的新型挖掘方法:设计基于质数对数运算的数据变换方法,将大量数据转换成简单的数字;利用Spark并行框架中的平方/开方运算将这些数字转换成... 展开更多; 关键词闭频繁项集大数据挖掘质数对数变换 Spark并行计算框架; 在线阅读下载PDF 职称材料

基于Hadoop的分布式云计算/云存储方案的研究与设计被引量：29: 4; 作者成静静《数据通信》 2012年第5期14-18,共5页; 通过介绍云计算技术的发展背景以及目前云计算技术的几种技术架构,对分布式云计算/云存储技术进行了详尽的研究,包括分布式云计算/云存储的整体架构、分布式文件系统、分布式数据库、分布式数据仓库、分布式同步软件等,并通过与并行关... 展开更多; 关键词云计算终端桌面云分布式云计算云存储 HADOOP 分布式文件系统(HDFS) 分布式数据库(Hbase) 并行计算框架(MapReduce) 分布式同步软件(Zookeeper); 在线阅读下载PDF 职称材料

基于云计算的大数据统一分析平台研究与设计被引量：36: 5; 作者成静静喻朝新《广东通信技术》 2013年第1期6-10,共5页; 通过介绍大数据时代的业务特点以及目前大数据时代面临的挑战,对基于云计算的大数据统一分析平台进行了详尽的研究与设计,包括大数据分析平台的架构体系、大数据分析平台的软件架构、大数据分析平台的网络架构、大数据统一分析平台的方... 展开更多; 关键词云计算大数据 Master主机 Segment服务器完全无共享(share-nothing)架构数据保护并行计算框架(Map Reduce)高可用性; 在线阅读下载PDF 职称材料

基于MapReduce模型遗传算法的一种改进与实现被引量：5: 6; 作者胡涛《电子设计工程》 2013年第5期32-35,39,共5页; 遗传算法的内在隐并行性决定了其能够以少量的问题编码进而处理大量模式,不少处理更大规模且复杂问题的并行遗传算法也提了出来。本文给出了在Hadoop中MapReduce并行计算框架下简单遗传算法的并行化处理流程,结合框架处理输入和输出键... 展开更多; 关键词 MAPREDUCE模型并行计算框架遗传算法最小堆结构; 在线阅读下载PDF 职称材料

题名应用并行计算框架提升地震数据处理效率分析被引量：6: 1; 作者祝树云朱旭光颉冬莲张丽梅; 机构东方地球物理公司物探技术研究中心; 出处《石油地球物理勘探》 EI CSCD 北大核心 2011年第3期493-499,332,共7页; 文摘并行计算框架系统将地震数据可分割处理的特点与现代计算机群多节点、多线程的并行运算能力巧妙结合,在提升常规地震处理运算效率、缩短地震资料处理周期方面发挥了显著作用。本文通过大量数据的测试,对影响并行计算框架运算效率的各种因素进行了分析。并行计算框架对地震数据处理运行效率的提高并不是随着并行任务数线性增长,与机群I/O效率及并行处理作业的计算量有关。随着并行任务数的增加,效率提高速度会逐步放缓,当达到最佳并行度时会出现拐点。另外,并行计算框架效率的提高与数据分割粒度有关,粗粒度分割更有利。因此应用并行框架系统时,应根据机群I/O效率与并行处理作业的计算量,选择合理的并行处理任务数。; 关键词并行计算框架并行效率并行加速比处理周期; Keywords parallel algorithm framework,parallel efficiency,parallel speed-up ratio,processing cycle; 分类号 P631 [天文地球—地质矿产勘探]; 在线阅读下载PDF 职称材料

题名基于低代码思想的可视化并行计算框架设计被引量：1: 2; 作者杨冬亮焦淼韩源冬; 机构西安微电子技术研究所; 出处《信息技术与信息化》 2023年第12期21-24,共4页; 文摘先进装备的新型信息处理平台采用高性能多核处理器为核心的一体化架构,来满足高性能和智能化需求。为了支撑密集计算任务,需要并行计算框架来解决多核同步、负载均衡、任务调度、数据分发等并行计算应用难题。然而,现有的并行计算框架多为基于Linux的开源框架,不支持国产多核处理器;同时,基于并行计算框架的编程方式与传统的以控制算法为中心的结构化编程思路不同,对于习惯了C/C++编写串行程序的用户,基于并行计算框架编程面临许多难题。针对上述问题,在解决国产多核处理器操作系统并行计算框架适配问题的同时,基于低代码设计思想,研究简化并行计算框架编程方法、提升并行应用编程效率的技术途径,通过可视化组件配置与代码自动生成的方式,真正地降低并行编程难度,充分发挥国产多核处理器的并行计算效能。; 关键词嵌入式操作系统并行计算框架模型驱动低代码可视化组件; 分类号 TP311.52 [自动化与计算机技术—计算机软件与理论]; 在线阅读下载PDF 职称材料

题名利用数据变换与并行运算的闭频繁项集挖掘方法被引量：12: 3; 作者党红恩赵尔平刘炜雒伟群; 机构西藏民族大学信息工程学院; 出处《湘潭大学自然科学学报》 CAS 2018年第1期119-122,共4页; 基金国家自然科学基金项目(41361044); 文摘针对传统闭频繁项集(CFI)挖掘方法耗时长、效率低的问题,提出一种基于数据变换与并行运算(DTPC)的新型挖掘方法:设计基于质数对数运算的数据变换方法,将大量数据转换成简单的数字;利用Spark并行框架中的平方/开方运算将这些数字转换成频繁项集.3 000万篇文章的大数据集实验结果表明,提出的DTPC算法可以大幅度提升数据挖掘效率,同时减少计算资源的不必要浪费.; 关键词闭频繁项集大数据挖掘质数对数变换 Spark并行计算框架; Keywords closed frequent item set big data mining prime-logarithmic-operational based data transformation spark parallel computing framework; 分类号 TP311 [自动化与计算机技术—计算机软件与理论] O241 [理学—计算数学]; 在线阅读下载PDF 职称材料

题名基于Hadoop的分布式云计算/云存储方案的研究与设计被引量：29: 4; 作者成静静; 机构广东省电信规划设计院有限公司; 出处《数据通信》 2012年第5期14-18,共5页; 文摘通过介绍云计算技术的发展背景以及目前云计算技术的几种技术架构,对分布式云计算/云存储技术进行了详尽的研究,包括分布式云计算/云存储的整体架构、分布式文件系统、分布式数据库、分布式数据仓库、分布式同步软件等,并通过与并行关系型数据库、MPP数据库的对比,分析了基于Hadoop的分布式云计算/云存储架构的竞争优势,基于Hadoop的分布式云计算/云存储将更有效支撑未来电信运营商业务的发展。; 关键词云计算终端桌面云分布式云计算云存储 HADOOP 分布式文件系统(HDFS) 分布式数据库(Hbase) 并行计算框架(MapReduce) 分布式同步软件(Zookeeper); 分类号 TP333 [自动化与计算机技术—计算机系统结构]; 在线阅读下载PDF 职称材料

题名基于云计算的大数据统一分析平台研究与设计被引量：36: 5; 作者成静静喻朝新; 机构广东省电信规划设计院中国移动通信集团广东有限公司; 出处《广东通信技术》 2013年第1期6-10,共5页; 文摘通过介绍大数据时代的业务特点以及目前大数据时代面临的挑战,对基于云计算的大数据统一分析平台进行了详尽的研究与设计,包括大数据分析平台的架构体系、大数据分析平台的软件架构、大数据分析平台的网络架构、大数据统一分析平台的方案特点等,分析了基于云计算的大数据统一分析平台方案的竞争优势,基于云计算的大数据统一分析平台将更有效支撑未来电信运营商业务的发展。; 关键词云计算大数据 Master主机 Segment服务器完全无共享(share-nothing)架构数据保护并行计算框架(Map Reduce)高可用性; 分类号 TP274 [自动化与计算机技术—检测技术与自动化装置]; 在线阅读下载PDF 职称材料

题名基于MapReduce模型遗传算法的一种改进与实现被引量：5: 6; 作者胡涛; 机构武汉科技大学信息科学与工程学院; 出处《电子设计工程》 2013年第5期32-35,39,共5页; 文摘遗传算法的内在隐并行性决定了其能够以少量的问题编码进而处理大量模式,不少处理更大规模且复杂问题的并行遗传算法也提了出来。本文给出了在Hadoop中MapReduce并行计算框架下简单遗传算法的并行化处理流程,结合框架处理输入和输出键值对的特点提出了基于最小堆的最优个体保留策略的遗传算法在的设计与实现,进一步优化了算法的收敛速度。实验结果表明:运用框架的并行处理能力及堆的线性操作时间,应用于较大规模复杂问题该算法实现在收敛速度上呈良好特性。; 关键词 MAPREDUCE模型并行计算框架遗传算法最小堆结构; Keywords MapReduce model parallel computing framework Genetic Algorithm rain-heap structure; 分类号 TP311 [自动化与计算机技术—计算机软件与理论]; 在线阅读下载PDF 职称材料

	题名	作者	出处	发文年	被引量	操作
1	应用并行计算框架提升地震数据处理效率分析	祝树云朱旭光颉冬莲张丽梅	《石油地球物理勘探》 EI CSCD 北大核心	2011	6	在线阅读下载PDF 职称材料
2	基于低代码思想的可视化并行计算框架设计	杨冬亮焦淼韩源冬	《信息技术与信息化》	2023	1	在线阅读下载PDF 职称材料
3	利用数据变换与并行运算的闭频繁项集挖掘方法	党红恩赵尔平刘炜雒伟群	《湘潭大学自然科学学报》 CAS	2018	12	在线阅读下载PDF 职称材料
4	基于Hadoop的分布式云计算/云存储方案的研究与设计	成静静	《数据通信》	2012	29	在线阅读下载PDF 职称材料
5	基于云计算的大数据统一分析平台研究与设计	成静静喻朝新	《广东通信技术》	2013	36	在线阅读下载PDF 职称材料
6	基于MapReduce模型遗传算法的一种改进与实现	胡涛	《电子设计工程》	2013	5	在线阅读下载PDF 职称材料