期刊文献+
共找到333篇文章
< 1 2 17 >
每页显示 20 50 100
New multi-DSP parallel computing architecture for real-time image processing 被引量:4
1
作者 Hu Junhong Zhang Tianxu Jiang Haoyang 《Journal of Systems Engineering and Electronics》 SCIE EI CSCD 2006年第4期883-889,共7页
The flexibility of traditional image processing system is limited because those system are designed for specific applications. In this paper, a new TMS320C64x-based multi-DSP parallel computing architecture is present... The flexibility of traditional image processing system is limited because those system are designed for specific applications. In this paper, a new TMS320C64x-based multi-DSP parallel computing architecture is presented. It has many promising characteristics such as powerful computing capability, broad I/O bandwidth, topology flexibility, and expansibility. The parallel system performance is evaluated by practical experiment. 展开更多
关键词 parallel computing image processing real-time computer architecture
在线阅读 下载PDF
High performance reconfigurable hardware system for real-time image processing
2
作者 赵广州 张天序 +2 位作者 王岳环 曹治国 左峥嵘 《Journal of Systems Engineering and Electronics》 SCIE EI CSCD 2005年第3期502-509,共8页
A novel reconfigurable hardware system which uses both muhi-DSP and FPGA to attain high performance and real-time image processing are presented. The system structure and working principle of mainly processing multi-B... A novel reconfigurable hardware system which uses both muhi-DSP and FPGA to attain high performance and real-time image processing are presented. The system structure and working principle of mainly processing multi-BSP board, extended multi-DSP board are analysed. The outstanding advantage is that the communication among different board components of this system is supported by high speed link ports & serial ports for increasing the system performance and computational power. Then the implementation of embedded real-time operating systems (RTOS) by us is discussed in detail. In this system, we adopt two kinds of parallel structures controlled by RTOS for parallel processing of algorithms. The experimental results show that exploitive period of the system is short, and maintenance convenient. Thus it is suitable for real-time image processing and can get satisfactory effect of image recognition. 展开更多
关键词 MULTI-DSP fidd programmable gate arrays real-time image processing real time operating systems parallel structure.
在线阅读 下载PDF
Comparison of Two Real-time PCR Technigues for Quantification of GMO Contents in Highly Processed Products of Soybean
3
作者 YU Yanbo GAO Xuejun ZHANG Minghui LI Lu AO Jinxia 《Journal of Northeast Agricultural University(English Edition)》 CAS 2010年第1期37-42,共6页
The RR soybean was quantitatively detected by ABI Prism 7300 sequence detector with PCR primers and fluorescence probes were designed according to the sequences of endogenous Lectin gene and exogenous CP4-EPSPS gene, ... The RR soybean was quantitatively detected by ABI Prism 7300 sequence detector with PCR primers and fluorescence probes were designed according to the sequences of endogenous Lectin gene and exogenous CP4-EPSPS gene, and the PCR systems were based on SYBR Green I and TaqMan. The standard curve of ACt between CP4-EPSPS gene and Lectin gene of the RR soybean in standard materials was generated and a linear regression equation was obtained. Quantification methods were optimized through two different real-time PCR chemistries, i.e. SYBR Green I and TaqMan, and the RR soybean contents were quantified in five standard samples and seven highly processed products by the two assays. Both methods are proved to be specific, highly sensitive and reliable for both identification and quantification of soybean DNA. The results indicate that the two optimized PCR system can be used for the practical quantitative detection of RR soybean in highly processed products. 展开更多
关键词 RR soybean highly processed products CP4-EPSPS gene real-time PCR SYBR Green I TAQMAN
在线阅读 下载PDF
Image processing algorithm acceleration using reconfigurable macro processor model 被引量:2
4
作者 SunGuanKfu ChenHuaming LuHuanzhang 《Journal of Systems Engineering and Electronics》 SCIE EI CSCD 2004年第2期110-114,共5页
The concept and advantage of reconfigurable technology is introduced. A kind of processor architecture of re configurable macro processor (RMP) model based on FPGA array and DSP is put forward and has been implemented... The concept and advantage of reconfigurable technology is introduced. A kind of processor architecture of re configurable macro processor (RMP) model based on FPGA array and DSP is put forward and has been implemented. Two image algorithms are developed: template-based automatic target recognition and zone labeling. One is estimating for motion direction in the infrared image background, another is line picking-up algorithm based on image zone labeling and phase grouping technique. It is a kind of 'hardware' function that can be called by the DSP in high-level algorithm. It is also a kind of hardware algorithm of the DSP. The results of experiments show the reconfigurable computing technology based on RMP is an ideal accelerating means to deal with the high-speed image processing tasks. High real time performance is obtained in our two applications on RMP. 展开更多
关键词 real-time image processing reconfigurable computing technology reconfigurable macro processor model template matching image zone labeling.
在线阅读 下载PDF
考虑设备能耗耦合的制造价值流诊断与评价研究
5
作者 杨立军 陈亮辉 +1 位作者 刘利军 龙智新 《机械设计与制造》 北大核心 2025年第1期39-45,共7页
针对传统设备能耗计算不考虑加工-物流耦合过程的问题,提出一种考虑设备能耗耦合过程的制造价值流诊断与评价体系,该体系包括诊断和评价两部分。首先,在诊断部分,提出一种融入工艺操作能耗和设备耦合过程能耗计算的新型能量价值流图(E-V... 针对传统设备能耗计算不考虑加工-物流耦合过程的问题,提出一种考虑设备能耗耦合过程的制造价值流诊断与评价体系,该体系包括诊断和评价两部分。首先,在诊断部分,提出一种融入工艺操作能耗和设备耦合过程能耗计算的新型能量价值流图(E-VSM,Energy-Value Stream Mapping)绘制和分析方法,通过该方法不仅对设备层面进行详细的划分,还解决了加工-物流能耗耦合过程的问题。其次,从能源节约的角度,提出一种精益改善项目的评价方法,构建精益能耗计算(LIECC,Lean Improvement Energy Consumption Calculation)框架模型,通过该模型可以计算生产设备的各种能耗,并且定义了一种面向设备生产的能耗评估方法,进而评价企业实施精益改善项目的能源节约效果。最后,基于提出的制造价值流诊断与评价体系对某公司连接件产品进行价值流诊断和评价,能够降低车间设备30%以上的能耗,表明了该方法对降低制造能耗具有显著的效果。 展开更多
关键词 设备能耗 耦合过程 能量价值流图 诊断评价
在线阅读 下载PDF
基于改进价值流图的大飞机零部件表面处理工艺碳排放建模与减碳分析
6
作者 曹华军 李亚鹏 +3 位作者 葛威威 丁瑶 王超 何思航 《航空制造技术》 北大核心 2025年第6期28-37,共10页
在“双碳”战略的背景下,绿色低碳已成为航空制造业发展的必由之路。表面处理工艺作为大飞机零部件加工的关键工艺,具有多工序、长流程和多碳排放源的特点,且存在能耗高、能效低、碳排放严重的问题,对绿色低碳发展提出了挑战。为此,本... 在“双碳”战略的背景下,绿色低碳已成为航空制造业发展的必由之路。表面处理工艺作为大飞机零部件加工的关键工艺,具有多工序、长流程和多碳排放源的特点,且存在能耗高、能效低、碳排放严重的问题,对绿色低碳发展提出了挑战。为此,本研究以大飞机零部件表面处理工艺为对象,定义了表面处理工艺碳排放边界,分析了该工艺的碳排放特性,在此基础上,提出了基于改进价值流图的大飞机零部件表面处理工艺碳排放核算方法,并基于敏感性分析对其热点工序进行剖析以阐明表面处理工艺减碳潜力。最后,以某大飞机铝合金零部件硼硫酸阳极化为研究案例,验证了所提方法的有效性。该研究可为表面处理工艺碳排放精细化建模提供方法支撑,并为后续开展节能减碳奠定理论基础。 展开更多
关键词 绿色制造 航空制造 碳排放 表面处理工艺 改进价值流图
在线阅读 下载PDF
侧流强化生物除磷工艺研究进展
7
作者 王东琦 秦璐 《水处理技术》 北大核心 2025年第2期14-21,共8页
污水处理厂传统强化生物除磷(EBPR)工艺常因进水碳源不足导致除磷性能不佳,难以满足日益严格的排放标准。近年来,利用污泥厌氧水解发酵产生额外“内碳源”的侧流EBPR(S2EBPR)工艺因其在低碳源进水条件下仍可取得高效稳定的除磷性能而受... 污水处理厂传统强化生物除磷(EBPR)工艺常因进水碳源不足导致除磷性能不佳,难以满足日益严格的排放标准。近年来,利用污泥厌氧水解发酵产生额外“内碳源”的侧流EBPR(S2EBPR)工艺因其在低碳源进水条件下仍可取得高效稳定的除磷性能而受到越来越多的关注。归纳总结了S2EBPR工艺的主要构型及其除磷性能的影响因素,梳理了工艺生化反应过程及功能微生物作用机理的研究进展,并在此基础上对未来工艺的重点研究方向提出了展望,以期推动针对该工艺的进一步研究和推广应用,为污水绿色低碳处理与资源化利用提供支撑。 展开更多
关键词 强化生物除磷 低碳源进水 侧流工艺 污泥水解发酵 聚磷菌
在线阅读 下载PDF
基于Spark Streaming的实时数据分析系统及其应用 被引量:30
8
作者 韩德志 陈旭光 +2 位作者 雷雨馨 戴永涛 张肖 《计算机应用》 CSCD 北大核心 2017年第5期1263-1269,共7页
为了实现对实时网络数据流的快速分析,设计一种分布式实时数据流分析系统(DRDAS),能有效解决并发访问数据流的收集、存储和实时分析问题,为大数据环境的网络安全检测提供了一种有效的数据分析平台;根据Spark Streaming运行的原理设计一... 为了实现对实时网络数据流的快速分析,设计一种分布式实时数据流分析系统(DRDAS),能有效解决并发访问数据流的收集、存储和实时分析问题,为大数据环境的网络安全检测提供了一种有效的数据分析平台;根据Spark Streaming运行的原理设计一种动态采样的K-Means并行算法,与DRDAS结合能实时有效地检测大数据环境下的各种分布式拒绝服务(DDo S)攻击。实验结果显示:DRDAS具有好的可扩展性、容错性和实时处理能力,与动态采样的K-Means并行算法结合能实时地检测各种DDo S攻击,缩短了攻击的检测时间。 展开更多
关键词 SPARK streaming框架 分布式流处理 网络数据分析 分布式拒绝服务攻击
在线阅读 下载PDF
面向Apache Flink流式分析应用的高吞吐优化技术
9
作者 秦政 许利杰 +4 位作者 陈伟 王毅 吴铭钞 曾鸿斌 王伟 《软件学报》 北大核心 2025年第7期3184-3208,共25页
随着大数据时代的到来,海量的用户数据赋能了众多数据驱动的行业应用,例如智慧交通、智能电网、商品推荐等.在数据实时性要求高的应用场景下,数据中的业务价值随时间增长快速降低,因此数据分析系统需要具有高吞吐和低延迟能力,以Apache ... 随着大数据时代的到来,海量的用户数据赋能了众多数据驱动的行业应用,例如智慧交通、智能电网、商品推荐等.在数据实时性要求高的应用场景下,数据中的业务价值随时间增长快速降低,因此数据分析系统需要具有高吞吐和低延迟能力,以Apache Flink为代表的流式大数据处理系统得到广泛应用.Flink通过在集群的计算节点上并行化计算任务,水平扩展系统吞吐率.然而,已有研究指出,Flink存在单点性能弱,集群水平可扩展性差的问题.为了提高流式大数据处理系统的吞吐率,研究者在控制平面设计、系统算子实现和垂直可扩展性等方面开展优化,但现有工作尚缺乏对流式分析应用数据流的关注.流式分析应用是由事件流驱动并使用有状态处理函数的应用,例如智能电网场景下的低电压检测应用、商品推荐场景下的广告活动分析应用等.对典型的流式分析应用的数据流特征进行分析,总结其中存在的3个水平可扩展性瓶颈并给出相应的优化策略,包括:键级水位线,动态负载分发策略和基于键值的数据交换策略.基于上述优化技术,对Flink框架进行扩展并形成原型系统Trilink,选取真实场景数据集:低电压检测应用,桥梁拱顶监测应用和典型流式分析测试基准Yahoo Streaming Benchmark,与现有工作进行测试比较.实验结果表明,相较于Flink,Trilink在单机环境下吞吐率提升了5倍以上,8节点下水平扩展加速比提高了1.6倍以上. 展开更多
关键词 流式处理 分布式系统 性能优化 大数据系统
在线阅读 下载PDF
动态场景下流感知的视觉定位方法
10
作者 王佳慧 来林静 张磊 《计算机辅助设计与图形学学报》 北大核心 2025年第6期961-972,共12页
在动态场景下,视觉同时定位与地图构建(simultaneous localization and mapping, SLAM)通常与深度学习方法结合提高系统的定位精度.针对深度学习方法运行时产生的时间延迟,导致系统难以达到流式处理要求的问题,提出一种面向动态场景下视... 在动态场景下,视觉同时定位与地图构建(simultaneous localization and mapping, SLAM)通常与深度学习方法结合提高系统的定位精度.针对深度学习方法运行时产生的时间延迟,导致系统难以达到流式处理要求的问题,提出一种面向动态场景下视觉SLAM的流感知定位方法.首先针对传统评估指标只考虑定位精度的问题,提出流式评估指标,该指标同时考虑定位精度和时间延迟,能够准确反映系统的流式处理性能;其次针对传统视觉SLAM方法无法实现流式处理的问题,提出流感知的视觉定位方法,通过多线程并行和相机位姿预测相结合的方式,获得持续稳定的相机位姿输出.在BONN数据集和真实场景上的实验结果表明,所提方法能够有效地提升动态场景下采用深度学习方法的视觉定位的流性能.基于BONN数据集和流式评估方式的评估结果表明,与DynaSLAM方法对比,所提方法的绝对轨迹误差(APE),相对平移误差(RPE_trans)和相对旋转误差(RPE_angle)分别下降80.438%, 56.180%和54.676%.在真实场景下的实验结果表明,所提方法可以得到与实际相符的相机轨迹. 展开更多
关键词 同时定位与地图构建 流式处理 流性能 相机位姿预测
在线阅读 下载PDF
融合深度强化学习与算子优化的流式任务调度
11
作者 郭陈虹 王菁 +2 位作者 巩会龙 郭浩浩 张睿轩 《郑州大学学报(理学版)》 CAS 北大核心 2025年第1期15-22,共8页
针对实时性要求高和作业量大的流处理作业执行过程中,多个作业之间存在的相同处理片段可能会导致流处理引擎重复计算、资源浪费和处理性能低下的问题,提出了融合深度强化学习与算子优化的流式任务调度方法。首先利用算子优化算法将多个... 针对实时性要求高和作业量大的流处理作业执行过程中,多个作业之间存在的相同处理片段可能会导致流处理引擎重复计算、资源浪费和处理性能低下的问题,提出了融合深度强化学习与算子优化的流式任务调度方法。首先利用算子优化算法将多个复杂的作业去重、重构,其次将重构得到的作业输入循环神经网络中得到任务的调度策略,最后利用强化学习模型进行调度策略的优化。所提方法利用算子优化减少了每个作业中创建的算子实例,结合深度强化学习自动发现最优的调度策略,有效地避免了因大量实例运行而造成的系统资源不足、数据拥塞等问题。对比实验结果表明,所提方法在吞吐量和延迟方面的表现更优异。 展开更多
关键词 流处理作业 任务调度 算子优化 深度强化学习
在线阅读 下载PDF
基于Spark Streaming的视频/图像流处理与新的性能评估方法 被引量:10
12
作者 黄文辉 冯瑞 《计算机工程与科学》 CSCD 北大核心 2015年第11期2055-2060,共6页
智能视频监控技术在公共安全、交通管理、智慧城市等方面有着广泛的运用前景,需求日益增长。随着摄像头安装的数量越来越多,采集的图像数据量越来越大,靠单台计算机处理已经远远不能满足需求了。分布式计算的兴起与发展为解决大规模的... 智能视频监控技术在公共安全、交通管理、智慧城市等方面有着广泛的运用前景,需求日益增长。随着摄像头安装的数量越来越多,采集的图像数据量越来越大,靠单台计算机处理已经远远不能满足需求了。分布式计算的兴起与发展为解决大规模的数据处理问题提供了很好的途径。使用一种基于Spark Streaming的视频/图像流处理的测试平台,阐述了平台的构成和工作流程,深入研究各个参数对集群性能的影响,创新性地提出了CPU时间占用率作为性能评估指标,与总的处理时间结合,更为全面反映集群性能和资源利用率。 展开更多
关键词 SPARK streamING CPU时间占用率 分布式 视频/图像处理
在线阅读 下载PDF
StreamQCTree:一种流数据方压缩结构 被引量:1
13
作者 甘亮 刘东红 +1 位作者 贾焰 韩伟红 《计算机工程与应用》 CSCD 北大核心 2011年第19期140-143,185,共5页
数据流管理系统计算聚集查询结果保存在内存中形成流数据方(StreamCube),提供快速、精确的在线OLAP查询。有限的内存空间需要一种有效的存储方法来存储更大时间窗口的流数据方。提出一种基于QC-Tree结构的流数据方StreamQCTree生成、裁... 数据流管理系统计算聚集查询结果保存在内存中形成流数据方(StreamCube),提供快速、精确的在线OLAP查询。有限的内存空间需要一种有效的存储方法来存储更大时间窗口的流数据方。提出一种基于QC-Tree结构的流数据方StreamQCTree生成、裁剪及查询方法。将QC-Tree结构中上界集划分为基本上界类和附加上界类;并分析附加上界类的成本计算模型;根据该模型在固定存储空间下,采用动态选择物化结点的方案选择物化部分附加上界类,使对StreamQCTree的平均查询响应时间最小。实验表明,StreamQCTree能够有效地访问数据方且获得较好的压缩效果。 展开更多
关键词 网络安全事件监控 streamQCTree 流数据方 数据压缩 联机分析处理 QC-Tree
在线阅读 下载PDF
侧流强化生物除磷工艺处理不同碳磷比废水研究
14
作者 辜文贵 李凯龙 +3 位作者 黄梦博 李晨 黄徐荔 王东琦 《水处理技术》 北大核心 2025年第8期116-122,128,共8页
生物脱氮除磷工艺处理低碳源废水的效果往往不佳。通过外加碳源或化学药剂的方式可以提高工艺性能,但会增加处理成本。侧流强化生物除磷(S2EBPR)工艺可以在一定程度上解决低碳源进水对除磷性能的限制。本研究基于序批式间歇反应器构建了... 生物脱氮除磷工艺处理低碳源废水的效果往往不佳。通过外加碳源或化学药剂的方式可以提高工艺性能,但会增加处理成本。侧流强化生物除磷(S2EBPR)工艺可以在一定程度上解决低碳源进水对除磷性能的限制。本研究基于序批式间歇反应器构建了S2EBPR工艺系统,探究了不同进水碳磷比(rbCOD/P)及侧流条件下反应器对污染物的处理性能、生物除磷活性、碳氮磷转化规律及微生物群落结构的变化。结果表明,当侧流比为20%、侧流污泥停留时间(SRTSS)为72 h时,S2EBPR系统在进水rbCOD/P=18.3条件下仍具有良好的除磷性能和活性。系统平均磷去除率和磷释放/乙酸利用比分别为90.9%和0.41 P-mol/C-mol。当侧流比增至25%、SRTSS缩短至57.6 h时,S2EBPR系统在低进水rbCOD/P条件下的除磷性能下降,主要原因是反应器筛选微生物效果和聚磷菌(PAOs)活性受到影响。虽然侧流污泥原位发酵会为主流增加约13%的氨氮负荷,但发酵产生的充足碳源足以抵消其影响。具有发酵能力的Tetrasphaera是S2EBPR系统内主要的PAOs,且可能与聚糖菌存在协同关系。SRTSS>72 h有利于PAOs在较低的进水rbCOD/P条件下占据优势。 展开更多
关键词 强化生物除磷 侧流工艺 污泥停留时间 生物除磷活性 群落结构
在线阅读 下载PDF
面向高速网络流实时处理的资源自适应伸缩方法
15
作者 康仕才 陈良国 陈兴蜀 《信息网络安全》 北大核心 2025年第1期110-123,共14页
在流处理中,静态资源配置难以应对实时变化且具有突发性的流数据负载,因此需要引入弹性机制。然而,在确定弹性伸缩时机和伸缩策略时,若未充分考虑伸缩的成本与收益之间的平衡,则会引发资源频繁调整,导致系统不稳定或效率降低。为解决这... 在流处理中,静态资源配置难以应对实时变化且具有突发性的流数据负载,因此需要引入弹性机制。然而,在确定弹性伸缩时机和伸缩策略时,若未充分考虑伸缩的成本与收益之间的平衡,则会引发资源频繁调整,导致系统不稳定或效率降低。为解决这一问题,文章提出一种资源自适应伸缩算法,该算法通过分析流数据负载规模和资源使用情况,确定资源伸缩的方向和规模。同时,该算法采用一种最大平均处理吞吐量方法,以伸缩操作前后的处理吞吐量为量化指标评估资源伸缩所带来的开销与收益,优化伸缩策略,避免不必要的资源频繁调整。基于该算法,文章设计了网络流弹性处理框架,以实现框架的灵活扩展与资源的动态调整。在不同网络带宽场景下对框架进行测试,实验结果表明,该算法能够有效权衡开销与收益,精确实现资源的伸缩,应用该算法后,框架资源利用率提高40%以上,能够满足高速网络流处理的性能需求。 展开更多
关键词 网络流 流处理 自适应 资源伸缩
在线阅读 下载PDF
基于动态时间窗格的数据仓库流批一体优化方法
16
作者 陈滨林 唐小勇 《计算机应用研究》 北大核心 2025年第8期2460-2466,共7页
数据仓库是企业数据管理核心,批处理和流处理是大数据分析的两种核心数据处理范式。为了解决传统批处理技术产出时延和资源消耗高的问题,以及流处理技术在处理多流数据关联和历史数据计算时面临的数据质量挑战,提出了一种流批一体处理... 数据仓库是企业数据管理核心,批处理和流处理是大数据分析的两种核心数据处理范式。为了解决传统批处理技术产出时延和资源消耗高的问题,以及流处理技术在处理多流数据关联和历史数据计算时面临的数据质量挑战,提出了一种流批一体处理方法。所提方法通过分析数据集在不同时间窗格中的变化,融合了基于调度时间的动态时间窗格划分和基于DFS算法的最简数据集搜索。实验结果表明,与主流微批处理方法相比,该方法将整体计算时间缩短57.2%,内存消耗减少24.2%,同时确保了数据的强一致性。该方法对于企业构建高处理效率、低资源消耗的流批一体化数据仓库具有重要参考价值。 展开更多
关键词 数据仓库 数据流处理 动态时间窗格 最简数据集 流批一体化
在线阅读 下载PDF
“生产团结”:直播电商劳动过程中的民族交融机制研究——以内蒙古自治区X电商公司为例
17
作者 李元元 胡嘉圆 《青海民族研究》 北大核心 2025年第2期145-154,共10页
在数字经济时代,直播电商这一新型的商业业态为多民族交往交流交融开辟了新途径。X电商公司通过直播销售民族特色产品的数字化生产劳动实践,将蒙古族与汉族员工组织起来,并营造不同民族之间和谐共事的局面,从而呈现出一种超越民族边界... 在数字经济时代,直播电商这一新型的商业业态为多民族交往交流交融开辟了新途径。X电商公司通过直播销售民族特色产品的数字化生产劳动实践,将蒙古族与汉族员工组织起来,并营造不同民族之间和谐共事的局面,从而呈现出一种超越民族边界的“生产共同体”面相。基于X电商公司的民族志研究表明,蒙古族员工和汉族员工之间围绕直播电商及与之关联的电商业务展开分工与合作,在制度、利益和情感这三重机制的逐步作用下,最终形塑出一种超越自身原有民族身份的“生产共同体”。这一生活实践为经验场景中多民族交往交流交融提供了生动的民族志案例,也对深入理解和推动铸牢中华民族共同体意识具有重要意义。 展开更多
关键词 生产团结 直播电商 劳动过程 共同体 民族交融
在线阅读 下载PDF
一种监控高维数据流的稳健型控制图
18
作者 丁冬 姜亚蕾 《运筹与管理》 北大核心 2025年第1期12-18,共7页
随着传感器等现代化科技的迅速发展,高维数据流在各行各业中频繁出现。然而,高维数据的复杂性给质量监控带来了许多挑战。例如,在高维情形下正态性假设往往失效,而且实际中分布形式通常未知;同时仅监控均值的控制图已经无法满足实际需求... 随着传感器等现代化科技的迅速发展,高维数据流在各行各业中频繁出现。然而,高维数据的复杂性给质量监控带来了许多挑战。例如,在高维情形下正态性假设往往失效,而且实际中分布形式通常未知;同时仅监控均值的控制图已经无法满足实际需求,监控方差的重要性早已成为学界和业界的共识。为此,提出了一种用于监控独立高维数据流的稳健型控制图。首先将经典的得分检验统计量经过数学变换后,与指数加权移动平均(EWMA)方法相结合,提出监控每一维数据流的局部统计量,并在此基础上结合top-r等方法,提出了监控高维数据流的全局监控统计量。所提出方法适用于正态分布及非正态分布的数据,并且能够同时监控均值和方差。通过数值仿真分析和实际案例研究阐明新方法的有效性和稳健性。 展开更多
关键词 高维数据流 稳健型控制图 EWMA top-r统计量 统计过程控制
在线阅读 下载PDF
CEStream:一种复杂事件流处理语言 被引量:4
19
作者 王亦雄 廖湖声 +2 位作者 孔祥翾 高红雨 苏航 《计算机科学》 CSCD 北大核心 2017年第4期140-143,164,共5页
复杂事件处理是支持大数据处理的流式计算平台的核心技术之一。CEStream语言作为一种新型的事件流处理语言,支持分布式环境下的复杂事件处理。该语言以XML等层次化数据为数据模型,为复杂事件检测提供了一种正规树模式匹配功能,并且支持... 复杂事件处理是支持大数据处理的流式计算平台的核心技术之一。CEStream语言作为一种新型的事件流处理语言,支持分布式环境下的复杂事件处理。该语言以XML等层次化数据为数据模型,为复杂事件检测提供了一种正规树模式匹配功能,并且支持结构连接和正规式匹配。同时,针对分布式的多个事件流,其能够将各个事件源模式匹配的结果按照时间顺序再一次进行正规式模式匹配,满足多源组合型复杂事件的检测需求,具有较强的事件处理能力。为了实现CEStream语言,研制了一个基于流数据处理集群和远端查询代理的执行引擎系统。该系统通过远程查询代理实现基于正规树模式的事件检测,通过流处理集群完成多源组合型复杂事件处理。实验表明,该系统实现了CEStream语言,有效地限制了各个节点之间的通信量,充分利用了集群的计算能力,整体性能能够满足应用需求。 展开更多
关键词 复杂事件处理 计算机语言 流式计算
在线阅读 下载PDF
基于Spark Streaming的快速视频转码方法 被引量:2
20
作者 付眸 杨贺昆 +3 位作者 吴唐美 何润 冯朝胜 康胜 《计算机应用》 CSCD 北大核心 2018年第12期3500-3508,共9页
针对单机视频转码方法转码速度较慢和面向批处理的并行转码方法效率提升有限的问题,基于Spark Streaming分布式流处理框架,提出了一种面向流处理的快速视频转码方法。首先,使用开源多媒体处理工具FFmpeg,构建了自动化的视频切片模型,提... 针对单机视频转码方法转码速度较慢和面向批处理的并行转码方法效率提升有限的问题,基于Spark Streaming分布式流处理框架,提出了一种面向流处理的快速视频转码方法。首先,使用开源多媒体处理工具FFmpeg,构建了自动化的视频切片模型,提出编程算法;然后,针对并行视频转码的特点,对弹性分布式数据集(RDD)进行研究,构建了视频转码的流处理模型;最后,设计视频合并方案,将合并后的视频文件进行有效储存。根据所提出的快速视频转码方法设计与实现了基于Spark Streaming的快速视频转码系统。实验结果表明,与面向批处理Hadoop视频转码方法相比,所提方法转码效率提升了26. 7%;与基于Hadoop平台的视频并行转码方法相比,该方法转码效率提升了20. 1%。 展开更多
关键词 视频转码 Sparkstreaming 分布式流处理 FFMPEG 弹性分布式数据集
在线阅读 下载PDF
上一页 1 2 17 下一页 到第
使用帮助 返回顶部