并行DSP系统消息传递路由算法 被引量：2

1

作者 王哲 王希敏 《计算机工程》 CAS CSCD 北大核心 2009年第17期241-243,246,共4页

为了提高DSP系统软件的移植性,设计消息传递路由算法。采用邻接表存储并行系统硬件拓扑结构,增加节点数据流信息为算法搜索的限制条件以提高算法效率。以ADSPTS101并行系统为例,使用VisualDSP++平台实现并验证该算法。结果表明,该算法... 为了提高DSP系统软件的移植性,设计消息传递路由算法。采用邻接表存储并行系统硬件拓扑结构,增加节点数据流信息为算法搜索的限制条件以提高算法效率。以ADSPTS101并行系统为例,使用VisualDSP++平台实现并验证该算法。结果表明,该算法有效解决并行DSP系统的消息传递问题,提高系统性能,在并行DSP系统中有较强通用性。 展开更多

关键词 并行dsp系统 消息传递 路由算法 数据流

在线阅读 下载PDF 职称材料

多DSP并列高速信号处理器的设计与实现 被引量：9

2

作者 甘旭军 李平康 杜秀霞 《仪器仪表学报》 EI CAS CSCD 北大核心 2002年第z2期574-576,共3页

介绍了研制的多DSP并行SHARC12数字信号处理阵列板的设计、组成、功能的实现方案和测试结果。该装置适用于分布式并行处理系统,如高速数据采集系统、雷达电子信号处理及交通管理等。

关键词 dsp SHARC 并行系统 可扩充分布式处理 高速数据采集

在线阅读 下载PDF 职称材料

带大容量存储的DSP并行处理系统的硬件设计 被引量：2

3

作者 汪兆锋 蔡体菁 《仪器仪表学报》 EI CAS CSCD 北大核心 2004年第z1期289-290,共2页

为了满足精度高、实时性好、成本低、体积小的导航数据处理系统的要求,提出了一种带大容量存储的DSP并行处理硬件系统。该系统数据处理能力强、通用性与可扩展性好,并且能够满足大容量数据存储的需求,可广泛地应用于数字信号处理的各个... 为了满足精度高、实时性好、成本低、体积小的导航数据处理系统的要求,提出了一种带大容量存储的DSP并行处理硬件系统。该系统数据处理能力强、通用性与可扩展性好,并且能够满足大容量数据存储的需求,可广泛地应用于数字信号处理的各个领域。 展开更多

关键词 dsp 并行处理 大容量存储

在线阅读 下载PDF 职称材料

多DSP并行结构的高速数据采集与处理系统及应用 被引量：1

4

作者 杨森 贺正洪 张金成 《弹箭与制导学报》 CSCD 北大核心 2008年第1期245-247,共3页

提出了一种由6片ADSP-21161构成的多DSP并行处理结构的高速数据采集系统的设计方案,对其中高速A/D、高速缓存、多DSP并行处理方式等内容进行了讨论,提出了更为有效的同步控制方式。该设计方案电路简单,具有运算能力强、I/O带宽宽、通信... 提出了一种由6片ADSP-21161构成的多DSP并行处理结构的高速数据采集系统的设计方案,对其中高速A/D、高速缓存、多DSP并行处理方式等内容进行了讨论,提出了更为有效的同步控制方式。该设计方案电路简单,具有运算能力强、I/O带宽宽、通信手段多样、能灵活地改变拓扑结构、可扩展性和通用性强等特点,并且以此并行计算结构为核心设计实现了通用高速实时雷达信号处理系统。 展开更多

关键词 dsp 并行计算 实时信号处理 数据采集

在线阅读 下载PDF 职称材料

基于VLIW DSP加密与认证算法的实现 被引量：1

5

作者 许杰 麻军平 何虎 《计算机应用》 CSCD 北大核心 2012年第6期1650-1653,共4页

针对HD视频数据流传输过程中数据安全与完整性问题,介绍了一种专用于DES、3DES、SHA1、MD5、RSA的加密VLIW DSP(LILY-DSP)。为了提高性能和降低成本,DSP设计成具有11级流水线和2个并行执行簇,每一簇具有3个功能单元的专用并行结构。为... 针对HD视频数据流传输过程中数据安全与完整性问题,介绍了一种专用于DES、3DES、SHA1、MD5、RSA的加密VLIW DSP(LILY-DSP)。为了提高性能和降低成本,DSP设计成具有11级流水线和2个并行执行簇,每一簇具有3个功能单元的专用并行结构。为了提高速率,定制了专用指令实现复杂操作。提出了基于此DSP的对称加密算法、公钥加密和认证算法实现方法。仿真实现结果表明,基于VLIW DSP加密和认证算法能很好地满足实时HDvideo数据流需求。 展开更多

关键词 超长指令字 并行结构 数字信号处理 数据加密标准 SHA1 MD5 RSA

在线阅读 下载PDF 职称材料

SHARC DSP在机载雷达中的应用

6

作者 吴金方 《现代雷达》 CSCD 北大核心 2004年第11期58-61,共4页

讨论了由SHARC处理器组成的雷达信号处理机的拓扑结构、数据传送方式和若干工程实际问题。首先对基Cluster、串行连接、并行连接三种拓扑结构的数据传送机理进行研究。分析了不同拓扑结构的优缺点,指出其设计要点。其次分析了LINK口传... 讨论了由SHARC处理器组成的雷达信号处理机的拓扑结构、数据传送方式和若干工程实际问题。首先对基Cluster、串行连接、并行连接三种拓扑结构的数据传送机理进行研究。分析了不同拓扑结构的优缺点,指出其设计要点。其次分析了LINK口传送的特点,数据长度的选取和数据流均匀性的调节。针对模块间link口通讯的信号完整性问题,研究其高速PCB设计中的要点,对数据传送中的出错问题,提出了SHARC处理器网络的一点和多点检测方案。 展开更多

关键词 SHARC处理器 机载雷达 LINK口 雷达信号处理机 PCB设计 拓扑结构 dsp 数据传送 数据流 串行连接

在线阅读 下载PDF 职称材料

MapReduce并行编程模型研究综述 被引量：189

7

作者 李建江 崔健 +2 位作者 王聃 严林 黄义双 《电子学报》 EI CAS CSCD 北大核心 2011年第11期2635-2642,共8页

MapReduce并行编程模型通过定义良好的接口和运行时支持库,能够自动并行执行大规模计算任务,隐藏底层实现细节,降低并行编程的难度.本文对MapReduce的国内外相关研究现状进行了综述,阐述和分析了当前国内外与MapReduce相关的典型研究成... MapReduce并行编程模型通过定义良好的接口和运行时支持库,能够自动并行执行大规模计算任务,隐藏底层实现细节,降低并行编程的难度.本文对MapReduce的国内外相关研究现状进行了综述,阐述和分析了当前国内外与MapReduce相关的典型研究成果的特点和不足,重点对MapReduce涉及的关键技术(包括:模型改进、模型针对不同平台的实现、任务调度、负载均衡和容错)的研究现状进行了深入的分析.本文最后还对MapReduce未来的发展趋势进行了展望. 展开更多

关键词 MAPREDUCE 并行编程模型 运行时支持库 海量数据处理

在线阅读 下载PDF 职称材料

小型惯导系统数据实时采集处理与存储设计 被引量：20

8

作者 李杰 马幸 +1 位作者 刘俊 张文栋 《中国惯性技术学报》 EI CSCD 2008年第3期274-277,共4页

针对某型火箭弹实弹飞行的应用需求,设计并实现了一种基于DSP+FPGA+NAND FLASH架构的大容量导航数据实时采集处理与存储系统。在简要介绍该系统总体设计的基础上,重点探讨了系统的中断控制时序逻辑和系统中数据的读写设计方法。该系统... 针对某型火箭弹实弹飞行的应用需求,设计并实现了一种基于DSP+FPGA+NAND FLASH架构的大容量导航数据实时采集处理与存储系统。在简要介绍该系统总体设计的基础上,重点探讨了系统的中断控制时序逻辑和系统中数据的读写设计方法。该系统具有设计简洁、实时性强的优点;系统总体积小于50mm×50mm×1.8mm,总功耗小于760mW,AD有效位采集精度约14位,接近ADS8365实际支持的14位有效位精度;非常适用于惯性导航、组合导航等多通道同步实时数据采集处理与存储系统。 展开更多

关键词 导航数据 采集处理与存储 dsp FPGA

在线阅读 下载PDF 职称材料

MapReduce并行编程模型研究综述 被引量：24

9

作者 杜江 张铮 +1 位作者 张杰鑫 邰铭 《计算机科学》 CSCD 北大核心 2015年第S1期537-541 564,564,共6页

MapReduce并行编程模型的出现简化了并行编程的复杂度。通过调用方便的接口和运行时支持库,MapReduce并行编程模型可令大规模并行计算任务自动并发地执行而不必关心底层的具体实现细节,从而令MapReduce并行编程模型在大规模中低性能集... MapReduce并行编程模型的出现简化了并行编程的复杂度。通过调用方便的接口和运行时支持库,MapReduce并行编程模型可令大规模并行计算任务自动并发地执行而不必关心底层的具体实现细节,从而令MapReduce并行编程模型在大规模中低性能集群中发挥出色的计算能力,且可节约成本。对国内外关于MapReduce并行编程模型的研究现状进行了综述,分析了目前国内外相关研究成果的优缺点,并对MapReduce并行编程模型的未来发展进行了展望。 展开更多

关键词 MAPREDUCE 并行编程模型 并行计算 海量数据处理

在线阅读 下载PDF 职称材料

海量电能质量数据交换格式文件快速解析方案 被引量：9

10

作者 张逸 杨洪耕 《电力自动化设备》 EI CSCD 北大核心 2013年第12期116-121,127,共7页

提出了一种针对海量电能质量数据交换格式文件的快速解析方案。通过快速判断通道序列定义是否变化来避免重复解析相同的数据源记录。利用文件读取线程分解出观测值记录填入任务池中,观测值记录解析线程循环访问任务池,读取观测值记录进... 提出了一种针对海量电能质量数据交换格式文件的快速解析方案。通过快速判断通道序列定义是否变化来避免重复解析相同的数据源记录。利用文件读取线程分解出观测值记录填入任务池中,观测值记录解析线程循环访问任务池,读取观测值记录进行解析后放入数据缓存池,实现了多线程并行解析。基于支持并行扩展的.NET 4.0编程模型实现了所提方案。对现场海量电能质量数据交换格式文件进行解析测试,测试结果显示该方案可显著提高解析效率,并且加速比随CPU核数的增加和数据文件的增多而提高。在四川电能质量一体化数据平台中的成功应用证明了该方案的可靠性和实用性。 展开更多

关键词 电能质量 PQDIF 海量数据 数据处理 线程 并行 解析 NET 4 0

在线阅读 下载PDF 职称材料

面向海量数据的并行天文交叉证认 被引量：3

11

作者 赵青 孙济洲 +2 位作者 于策 崔辰州 肖健 《计算机应用》 CSCD 北大核心 2010年第8期2056-2059,2206,共5页

交叉证认是实现多波段数据融合的关键技术,天文数据的海量性使这一问题必须要依靠计算机技术加以解决。按照PCAM并行设计模型设计了并行交叉证认算法。针对交叉证认在数据I/O访问方面存在的性能瓶颈,通过调整划分的粒度、过滤空白区域... 交叉证认是实现多波段数据融合的关键技术,天文数据的海量性使这一问题必须要依靠计算机技术加以解决。按照PCAM并行设计模型设计了并行交叉证认算法。针对交叉证认在数据I/O访问方面存在的性能瓶颈,通过调整划分的粒度、过滤空白区域、优化数据加载、计算流程等方法,协调了数据读取量与计算量间的关系。实验表明该并行方法对交叉证认计算的效率提升明显。另一方面还考虑了对HTM、HEALPix两种最常用天文数据索引方式的支持,并通过实验对比了两者的性能,为我国天文数据主题库、虚拟天文台等项目提供了技术参考。 展开更多

关键词 天文交叉证认 HTM HEALPix PCAM并行程序设计模型 大规模数据处理

在线阅读 下载PDF 职称材料

大流量网络平台下并行数据库的设计与实现 被引量：2

12

作者 田志宏 云晓春 +1 位作者 胡铭曾 方滨兴 《计算机工程与应用》 CSCD 北大核心 2003年第25期187-189,共3页

随着计算机网络的迅猛发展,网络速度已经从10Mb/s、100Mb/s达到了1Gb/s,因此,一般工作在网络平台下的数据库随着数据量的增加,往往难以满足用户的需求。因此,该文将并行处理与数据库技术相结合,设计并实现了应用于大流量网络平台的并行... 随着计算机网络的迅猛发展,网络速度已经从10Mb/s、100Mb/s达到了1Gb/s,因此,一般工作在网络平台下的数据库随着数据量的增加,往往难以满足用户的需求。因此,该文将并行处理与数据库技术相结合,设计并实现了应用于大流量网络平台的并行数据库。 展开更多

关键词 数据库 并行处理 大流量

在线阅读 下载PDF 职称材料

飞机进气道流场压力畸变数据采集与处理系统 被引量：2

13

作者 宁交贤 宁烽 +2 位作者 黄爽 胡同 宋志安 《力学学报》 EI CSCD 北大核心 1997年第3期336-342,共7页

论述了一个用于飞机进气道出口流场动态压力畸变测试分析的高速数据采集及实时存储处理系统的研制背景、国内外情况、主要技术难题及已完成系统的组成、功能和技术性能。

关键词 进气道 动态压力畸变 高速数据采集 航空发动机

在线阅读 下载PDF 职称材料

基于Hadoop+MPP架构的城市轨道交通大数据中心建设方案 被引量：10

14

作者 朱嘉斌 《城市轨道交通研究》 北大核心 2022年第5期54-57,共4页

分析了城市轨道交通大数据中心建设中面临的挑战,介绍了Hadoop+MPP技术架构的特点,介绍了基于Hadoop+MPP架构的大数据中心的系统逻辑架构、数据处理架构和数据处理流程。苏州轨道交通的项目实践表明,基于Hadoop+Mpp架构的大数据中心建... 分析了城市轨道交通大数据中心建设中面临的挑战,介绍了Hadoop+MPP技术架构的特点,介绍了基于Hadoop+MPP架构的大数据中心的系统逻辑架构、数据处理架构和数据处理流程。苏州轨道交通的项目实践表明,基于Hadoop+Mpp架构的大数据中心建设方案能够达到预期效果。 展开更多

关键词 城市轨道交通 大数据中心 HADOOP MPP 建设方案

在线阅读 下载PDF 职称材料

近数据计算下键值存储中Compaction并行优化方法 被引量：1

15

作者 孙辉 娄本冬 +2 位作者 黄建忠 赵雨虹 符松 《计算机研究与发展》 EI CSCD 北大核心 2022年第3期597-616,共20页

大规模非结构化数据的爆炸式增长给传统关系型数据库带来了极大的挑战.基于日志结构合并树(log-structured merge tree,LSM-tree)的键值存储系统已被广泛应用,并起到重要的作用,原因在于基于LSM-tree的键值存储能够将随机写转化为顺序写... 大规模非结构化数据的爆炸式增长给传统关系型数据库带来了极大的挑战.基于日志结构合并树(log-structured merge tree,LSM-tree)的键值存储系统已被广泛应用,并起到重要的作用,原因在于基于LSM-tree的键值存储能够将随机写转化为顺序写,从而提升性能.然而,LSM-tree键值存储也存在一些性能问题.一方面,键值存储利用compaction操作更新数据,保持系统平衡,但造成严重的写放大问题.另一方面,以传统计算为中心的架构下,compaction操作带来大量的数据传输,影响了系统性能.以数据为中心的近数据计算模型(near-data processing,NDP)为基础,利用该模型下主机端与近数据计算使能设备端的并行资源,提出基于系统并行与流水线并行的compaction优化方法(collaborative parallel compaction optimization for LSM-tree key-value stores,CoPro).当处理compaction操作时,CoPro主机端与NDP设备端协同执行compaction卸载任务.此外,进一步提出基于决策组件的CoPro+,根据系统资源变化以及负载键值对中值大小的变化来动态调整并行度,使NDP架构中计算资源的使用更加高效.在搭建的硬件平台上验证了CoPro的有效性. 展开更多

关键词 日志归并树 键值存储 近数据计算 任务卸载 数据-流水线并行

在线阅读 下载PDF 职称材料

MPP的并行程序设计

16

作者 李文兵 裴伟东 +1 位作者 马燕 鲍云松 《天津师大学报（自然科学版）》 2000年第1期22-25,55,共5页

在分析 MPP结构的基础上 ,探讨了适宜 MPP的消息传递方式的两种并行程序设计方法 ,介绍了数据并行程序设计方法应注意的问题 。

关键词 大规模并行处理 消息传递 数据并行 程序设计

在线阅读 下载PDF 职称材料

基于共享存储的MPP数据库连接执行研究 被引量：4

17

作者 孙庆鑫 雷迎春 龚奕利 《计算机工程》 CAS CSCD 北大核心 2018年第6期24-28,共5页

为解决哈希分布表转换为随机分布表后连接效率低的问题,提出一种大规模并行处理数据库中哈希表的并行连接操作算法。根据共享存储环境下哈希分布表的数据块分布特性,并结合随机读取的扫描优势,利用数据多副本分布式存储提高本地读比率,... 为解决哈希分布表转换为随机分布表后连接效率低的问题,提出一种大规模并行处理数据库中哈希表的并行连接操作算法。根据共享存储环境下哈希分布表的数据块分布特性,并结合随机读取的扫描优势,利用数据多副本分布式存储提高本地读比率,且不损失数据块哈希分布的特性。TPC-H标准测试结果表明,与传统并行连接算法相比,该算法能有效提高连接操作效率,连接查询语句最高可降低30%的响应时间。 展开更多

关键词 连接操作 并行连接 大规模并行处理 大数据 在线分析处理

在线阅读 下载PDF 职称材料

软件SIMD的研究及应用 被引量：1

18

作者 卜士喜 竺红卫 《计算机工程》 CAS CSCD 北大核心 2010年第19期53-55,共3页

介绍软件SIMD技术,在不支持SIMD架构的处理器上使用该技术实现寄存器高低字节的并行运算,提高处理器的速度。软件SIMD包括基本的加减法运算、乘法运算和点积运算。在现有研究的基础上,解决包含负数的点积运算、复数运算中应用软件SIMD... 介绍软件SIMD技术,在不支持SIMD架构的处理器上使用该技术实现寄存器高低字节的并行运算,提高处理器的速度。软件SIMD包括基本的加减法运算、乘法运算和点积运算。在现有研究的基础上,解决包含负数的点积运算、复数运算中应用软件SIMD技术的问题,使其能广泛应用于数字信号处理等领域。 展开更多

关键词 单指令多数据流 软件SIMD 并行运算 数字信号处理

在线阅读 下载PDF 职称材料

基于Hadoop+MPP架构的电信运营商网络数据共享平台研究 被引量：19

19

作者 辛晃 易兴辉 陈震宇 《电信科学》 北大核心 2014年第4期135-145,共11页

运用分布式计算和分布式存储技术,对基于Hadoop+MPP架构的电信运营商网络数据共享平台的建设进行了研究。通过整合各专业分散的网管数据,搭建网络侧的基础数据平台、应用平台、统一管控平台,实现网络数据的集中采集存储、有效整合,将数... 运用分布式计算和分布式存储技术,对基于Hadoop+MPP架构的电信运营商网络数据共享平台的建设进行了研究。通过整合各专业分散的网管数据,搭建网络侧的基础数据平台、应用平台、统一管控平台,实现网络数据的集中采集存储、有效整合,将数据向应用开放共享。 展开更多

关键词 分布式 大数据 HADOOP MPP 数据共享

在线阅读 下载PDF 职称材料

大数据平台的关键技术及组网方案 被引量：14

20

作者 于富东 《电信科学》 北大核心 2015年第7期158-163,共6页

基于大数据发展的趋势和电信运营商面临的挑战,分析了建设大数据平台的重要性和必要性。结合运营商实际需求,提出了大数据平台建设的关键技术、系统架构、设备配置方法和组网方案等,对各电信运营商大数据平台的规划、设计、建设提供指... 基于大数据发展的趋势和电信运营商面临的挑战,分析了建设大数据平台的重要性和必要性。结合运营商实际需求,提出了大数据平台建设的关键技术、系统架构、设备配置方法和组网方案等,对各电信运营商大数据平台的规划、设计、建设提供指导意见。 展开更多

关键词 大数据平台 HADOOP 大规模并行处理 电信运营商

在线阅读 下载PDF 职称材料