基于知识的设计系统开发方法 被引量：7

1

作者 张君媛 黄金陵 庄蔚敏 《农业机械学报》 EI CAS CSCD 北大核心 2002年第6期110-112,共3页

论述了基于知识的工程的基本理论及基于知识的设计系统的原理及先进性 ,详细介绍了系统的开发过程和方法 。

关键词 知识 设计系统 开发方法 应用 计算机设计

在线阅读 下载PDF 职称材料

基于MapReduce的决策树算法并行化 被引量：19

2

作者 陆秋 程小辉 《计算机应用》 CSCD 北大核心 2012年第9期2463-2465,2469,共4页

针对传统决策树算法不能解决海量数据挖掘以及ID3算法的多值偏向问题,设计和实现了一种基于MapReduce架构的并行决策树分类算法。该算法采用属性相似度作为测试属性的选择标准来避免ID3算法的多值偏向问题,采用MapReduce模型来解决海量... 针对传统决策树算法不能解决海量数据挖掘以及ID3算法的多值偏向问题,设计和实现了一种基于MapReduce架构的并行决策树分类算法。该算法采用属性相似度作为测试属性的选择标准来避免ID3算法的多值偏向问题,采用MapReduce模型来解决海量数据挖掘问题。在用普通PC搭建的Hadoop集群的实验结果表明:基于MapReduce的决策树算法可以处理大规模数据的分类问题,具有较好的可扩展性,在保证分类正确率的情况下能获得接近线性的加速比。 展开更多

关键词 MAPREDUCE 属性相似度 HADOOP 决策树 ID3算法

在线阅读 下载PDF 职称材料

并行实时数据库系统多版本两阶段封锁并发控制协议 被引量：3

3

作者 雷向东 袁晓莉 《中南工业大学学报》 CSCD 北大核心 2003年第3期298-301,共4页

提出了适用于无共享结构并行数据库实时多版本两阶段封锁并发控制协议.该协议具有多版本并发控制机制与两阶段封锁机制的优点,使用如下策略以减少延误截止时间事务数量:若冲突集中有比持锁事务Ti优先级高的事务,且Ti重启动不会延误截止... 提出了适用于无共享结构并行数据库实时多版本两阶段封锁并发控制协议.该协议具有多版本并发控制机制与两阶段封锁机制的优点,使用如下策略以减少延误截止时间事务数量:若冲突集中有比持锁事务Ti优先级高的事务,且Ti重启动不会延误截止时间,则Ti重启动,冲突集中优先级最高的事务获得锁;否则,冲突集中其他事务等待.通过仿真模拟,与HP2PL和OCC TI WAIT 50协议进行比较,结果表明:在正常负载、长短事务混合的情况下,并发控制协议能有效地降低事务延误截止时间率、事务重启动率,减少同步开销,该协议比HP2PL和OCC TI WAIT 50协议性能更好,同时具有较强的扩展性. 展开更多

关键词 并行数据库系统 实时数据库 无共享结构 并发控制 多版本两阶段封锁协议

在线阅读 下载PDF 职称材料

基于SN结构的事件流并行数据库加载均衡策略研究 被引量：1

4

作者 刘莹 王启荣 孙凝晖 《计算机研究与发展》 EI CSCD 北大核心 2009年第1期159-166,共8页

倾斜问题是并行系统普遍存在的问题,对系统的性能影响很大.事件流数据库作为数据流应用的后端分析处理系统具有连续大量的事件流加载与用户查询并存的特点,传统的解决数据倾斜的方法无法适应其动态加载的特点.以主干网的网络安全监控应... 倾斜问题是并行系统普遍存在的问题,对系统的性能影响很大.事件流数据库作为数据流应用的后端分析处理系统具有连续大量的事件流加载与用户查询并存的特点,传统的解决数据倾斜的方法无法适应其动态加载的特点.以主干网的网络安全监控应用为研究背景,结合事件流负载特征,针对基于无共享结构的事件流并行数据库提出了一种基于周期计数的能力感知加载均衡策略.该方法在保证加载性能的同时,可以根据加载节点的能力在线自动调解数据分布,不仅有效预防和解决了系统倾斜,还为查询服务的性能奠定了良好的基础.模拟分析和真实测试都证明这种加载均衡策略较其他策略更有效. 展开更多

关键词 倾斜 事件流 并行数据库 负载均衡 加载策略

在线阅读 下载PDF 职称材料

实时数据库的现状及发展趋势 被引量：6

5

作者 赵光煜 赵平 《天津农学院学报》 CAS 2002年第3期50-52,共3页

主要就实时数据库的一些基本问题以及嵌入式实时数据库系统 (ERTDBS)的特性、与传统DBS的区别 ,以及今后值得重视和研究的问题进行探讨。时间是实时系统 (RTS)中的一个主要资源 ,快速性、可预测性和容错性是RTS的重要特征。实时数据库系... 主要就实时数据库的一些基本问题以及嵌入式实时数据库系统 (ERTDBS)的特性、与传统DBS的区别 ,以及今后值得重视和研究的问题进行探讨。时间是实时系统 (RTS)中的一个主要资源 ,快速性、可预测性和容错性是RTS的重要特征。实时数据库系统 (RTDBS)必须提供正确性、及时性和主动性等功能特性。嵌入式实时数据库系统 (ERTDBS)具有定时限制的特性和分布式的特性。对ERTDBS与RTDBS的事务和数据特性进行了比较。 展开更多

关键词 实时数据库 现状 发展趋势

在线阅读 下载PDF 职称材料

无共享并行数据库中结点故障对策

6

作者 昌月楼 阳国贵 《计算机工程》 CAS CSCD 北大核心 1995年第S1期57-61,共5页

介绍了无共享并行数据库中用到的几种结点故障(处理机故障或磁盘故障)处理办法,分析了这几种办法在故障情况下保证数据库可用和负载均衡方面的差别,指出了链式分布(Chained Dcclustering)技术在上述两方面的优势。

关键词 并行处理 数据库 容错 负载均衡

在线阅读 下载PDF 职称材料

基于机群架构的并行数据库实现技术研究 被引量：6

7

作者 柳锴 唐雨新 +1 位作者 张云泉 李玉成 《计算机工程与设计》 CSCD 北大核心 2008年第3期526-529,646,共5页

在总结了现有并行数据库实现模型的基础上,基于"半重写变换"模型[1]实现了一个并行数据库系统的原型。通过对数据划分/重划分、并行选择、并行排序、并行连接等关键操作的实验分析,指出了"半重写变换"模型存在的缺... 在总结了现有并行数据库实现模型的基础上,基于"半重写变换"模型[1]实现了一个并行数据库系统的原型。通过对数据划分/重划分、并行选择、并行排序、并行连接等关键操作的实验分析,指出了"半重写变换"模型存在的缺陷,并提出了一种混合式的改进模型。从理论上说,在机群架构下实现并行数据库系统,这种混合模型较单一模型更有优势。 展开更多

关键词 并行数据库 实现模型 SMP机群 数据划分 并行算法

在线阅读 下载PDF 职称材料

大数据平台下的互联网广告点击率预估模型 被引量：7

8

作者 魏晓航 于重重 +1 位作者 田嫦丽 陈秀新 《计算机工程与设计》 北大核心 2017年第9期2504-2508,共5页

现存的广告点击率预估模型提取的特征维数较多,数据量较大,使得传统平台在应用时压力大,反应时间较长。针对这一问题,提出梯度提升决策树与因子分解机相结合的广告点击率预估模型,将基础特征库里的连续特征离散化,利用梯度提升决策树对... 现存的广告点击率预估模型提取的特征维数较多,数据量较大,使得传统平台在应用时压力大,反应时间较长。针对这一问题,提出梯度提升决策树与因子分解机相结合的广告点击率预估模型,将基础特征库里的连续特征离散化,利用梯度提升决策树对输入特征进行非线性转化,利用Hadoop大数据平台进行分布式训练,高效快速地提取出高层特征,利用因子分解机融合模型解决不均衡分类问题,利用AUC指标对模型进行评估,与常用广告点击率预估模型进行对比。实验结果表明,大数据平台以及并行化的应用使特征提取更加高效,模型解决了分类不均问题,具有更好的广告点击率预估效果。 展开更多

关键词 点击率预估 梯度提升决策树 Hadoop大数据平台 分布式训练 因子分解机

在线阅读 下载PDF 职称材料

图形处理器在数据库技术中的应用 被引量：4

9

作者 杨珂 罗琼 石教英 《浙江大学学报（工学版）》 EI CAS CSCD 北大核心 2009年第8期1349-1360,共12页

综述了图形处理器上的通用计算(GPGPU)技术以及利用图形处理器(GPU)进行数据库处理的工作.将GPU技术的发展划分为固定功能架构、分离渲染架构和统一渲染架构3个时代,归纳了GPGPU技术的难点和现状.对于3个时代的GPU,分别论述其体系结构... 综述了图形处理器上的通用计算(GPGPU)技术以及利用图形处理器(GPU)进行数据库处理的工作.将GPU技术的发展划分为固定功能架构、分离渲染架构和统一渲染架构3个时代,归纳了GPGPU技术的难点和现状.对于3个时代的GPU,分别论述其体系结构带来的机会与存在的局限,提出了相应的通用计算模型.综述了GPU用于数据库领域的相关研究,这些应用包括谓词、布尔组合和聚集、排序、连接、多维索引等.根据GPU技术的推动因素展望了GPGPU技术的趋势,归纳了GPU技术可以被利用的3个层面:图形流水线和通用并行计算、交互式多媒体、图形学理论与方法.以数据库技术为例展望了在每个层面上通用计算的趋势. 展开更多

关键词 图形处理器 通用计算 数据库技术

在线阅读 下载PDF 职称材料

基于Fermi架构的Join算法 被引量：1

10

作者 李观钊 陈思桐 +1 位作者 甄真 陈虎 《计算机科学》 CSCD 北大核心 2013年第3期62-67,共6页

在列数据库中,连接操作依然是最核心和最耗时的操作,GPU强大的计算能力可为此提供新的优化手段。基于Fermi架构,提出了新的Hash Join算法和Sort-merge Join算法,其基本思想是充分利用该架构新增的缓存结构来减少连接操作的cache缺失率。... 在列数据库中,连接操作依然是最核心和最耗时的操作,GPU强大的计算能力可为此提供新的优化手段。基于Fermi架构,提出了新的Hash Join算法和Sort-merge Join算法,其基本思想是充分利用该架构新增的缓存结构来减少连接操作的cache缺失率。与CUDA stream技术相结合,新算法在输出结果较多时可以有效地隐藏主存与显存间数据传输带来的延迟,进一步提升其执行效率。实验结果证实了基于Fermi架构的Hash Join算法处理偏斜数据的高效性及Sort-merge Join算法的稳定性,并且通过比较表明,这两种算法的性能全面优于基于多核CPU充分优化的Join算法,最大加速2.4倍,在外键分布高偏斜时新的Hash Join算法的执行速度甚至达到每秒217M元组。 展开更多

关键词 JOIN算法 Fermi架构 缓存 CUDA STREAM

在线阅读 下载PDF 职称材料

现代多功能制导站中央控制计算机并行计算技术研究 被引量：1

11

作者 陈国栋 王正青 《现代防御技术》 2000年第2期60-64,共5页

:通过实例分析 。

关键词 多功能制导站 中央 控制计算机 并行计算

在线阅读 下载PDF 职称材料

基于机群架构的并行数据库中间件系统改进研究

12

作者 陈虎 张云泉 +1 位作者 柳锴 李玉成 《计算机研究与发展》 EI CSCD 北大核心 2007年第Z3期142-146,共5页

基于机群架构的高性能计算机已经被应用到很多领域,如大气预测、油藏模拟、CFD仿真模拟和Web服务等.随着数据量的爆炸式增长,传统的集中式的数据库系统已经难以满足各种应用的需求,基于机群式架构的并行数据库系统为增强海量数据的存储... 基于机群架构的高性能计算机已经被应用到很多领域,如大气预测、油藏模拟、CFD仿真模拟和Web服务等.随着数据量的爆炸式增长,传统的集中式的数据库系统已经难以满足各种应用的需求,基于机群式架构的并行数据库系统为增强海量数据的存储以及处理能力提供了一种途径.对以前实现的一个基于机群架构的并行数据库中间件系统ParaMidSQL进行了改进.通过对并行选择、并行排序、并行连接等关键操作的测试,给出对并行数据库中间件系统改进后的性能分析. 展开更多

关键词 并行数据库 Beowulf机群 中间件 并行算法 MPI

在线阅读 下载PDF 职称材料