基于日志分析的网络性能检测分析平台设计与应用

1

作者 杨琴 刘刚 《重庆理工大学学报（自然科学）》 CAS 北大核心 2019年第8期165-169,共5页

网络性能检测是网络维护中重要的工作内容。提出了一种不使用网管接口,通过检测分析网络运行日志实现网络性能检测的方法。通过日志数据生成、数据采集、数据处理和数据应用等步骤实现信息的采集、过滤、压缩、展示。最后,通过在实际通... 网络性能检测是网络维护中重要的工作内容。提出了一种不使用网管接口,通过检测分析网络运行日志实现网络性能检测的方法。通过日志数据生成、数据采集、数据处理和数据应用等步骤实现信息的采集、过滤、压缩、展示。最后,通过在实际通信网络环境下的应用,并与终端检测方法进行比较,说明日志分析方法能满足生产环境中的工作要求。 展开更多

关键词 传输维护 性能统计 指标分析 日志文件 传输网管 java性能日志分析 数据分析

在线阅读 下载PDF 职称材料

基于Java的数据库访问中的性能问题分析与解决 被引量：3

2

作者 李海涛 李之棠 《计算机工程与应用》 CSCD 北大核心 2002年第18期212-213,217,共3页

文章通过逐步剖析JDBC访问数据库的机制,深层分析了造成速度瓶颈问题的原因,并提出在现有的Java技术框架下解决这个性能问题的多种思路和方法。

关键词 java 数据库访问 性能问题分析 JDBC

在线阅读 下载PDF 职称材料

Java虚拟机垃圾收集器的性能分析与调节 被引量：5

3

作者 吕爱民 何钦铭 《计算机应用与软件》 CSCD 北大核心 2004年第10期110-112,共3页

垃圾收集器是Java虚拟机 (JVM)的核心组成部分之一 ,对Java虚拟机的性能有非常重要的影响。本文将介绍GC的工作原理以及对象回收算法 ,重点介绍JVM的分段回收技术 ;剖析JVM自带的GC性能分析工具 ;阐述如何通过命令行参数调节GC的运行 ,... 垃圾收集器是Java虚拟机 (JVM)的核心组成部分之一 ,对Java虚拟机的性能有非常重要的影响。本文将介绍GC的工作原理以及对象回收算法 ,重点介绍JVM的分段回收技术 ;剖析JVM自带的GC性能分析工具 ;阐述如何通过命令行参数调节GC的运行 ,提高GC的效率。 展开更多

关键词 垃圾收集器 java虚拟机 JVM 性能分析工具 命令行参数 对象 算法 GC 调节 影响

在线阅读 下载PDF 职称材料

应用性能管理结合日志分析在信息系统运维中的应用展望

4

作者 徐飞 《信息网络安全》 CSCD 北大核心 2021年第S01期101-104,共4页

随着信息技术的不断发展和相关架构的日趋优化,影响信息系统稳定运行的主要因素已由基础设施故障、硬件性能瓶颈逐渐演变成更贴近业务逻辑的上层应用可靠性。传统的基于通用软硬件资源状态和性能的监控方式,因其技术原因无法深入应用内... 随着信息技术的不断发展和相关架构的日趋优化,影响信息系统稳定运行的主要因素已由基础设施故障、硬件性能瓶颈逐渐演变成更贴近业务逻辑的上层应用可靠性。传统的基于通用软硬件资源状态和性能的监控方式,因其技术原因无法深入应用内部捕获异常,当信息系统出现故障时,很难快速、准确地定位根源。文章分析了基于应用性能管理和日志分析技术路线的信息系统运维解决方案,初步探讨了两者结合的可行性。 展开更多

关键词 信息系统运维 应用性能管理 日志分析

在线阅读 下载PDF 职称材料

基于日志分析的搜索引擎查询结果缓存研究 被引量：3

5

作者 马宏远 王斌 《计算机研究与发展》 EI CSCD 北大核心 2012年第S1期224-228,共5页

缓存是有效减少响应时间和系统负载的关键技术,是搜索引擎系统结构研究的重要领域之一.通过对搜狗搜索引擎在近1个月内约1500万条用户查询日志进行分析和研究,针对查询结果缓存,从查询局部性、缓存策略、缓存容量、工作负载周期性等方... 缓存是有效减少响应时间和系统负载的关键技术,是搜索引擎系统结构研究的重要领域之一.通过对搜狗搜索引擎在近1个月内约1500万条用户查询日志进行分析和研究,针对查询结果缓存,从查询局部性、缓存策略、缓存容量、工作负载周期性等方面进行分析.分析表明,混合缓存策略以及提高缓存容量相结合的技术能有效提高搜索引擎系统性能. 展开更多

关键词 信息检索 查询日志分析 性能优化 搜索引擎 缓存

在线阅读 下载PDF 职称材料

基于过程挖掘的工作流性能分析 被引量：5

6

作者 刘新瑜 朱卫东 《计算机应用》 CSCD 北大核心 2005年第4期915-918,共4页

介绍了工作流性能的分析基础和概念。针对复杂和具有非确定性的业务流程,通过基于 工作流日志的工作流过程挖掘算法,得到反映系统基本性能的工作流性能分析网。并应用到具有动 态、模糊控制流程的工作流系统的性能分析中。

关键词 工作流 过程挖掘 性能分析 日志

在线阅读 下载PDF 职称材料

分布式存储系统中的日志分析与负载特征提取 被引量：13

7

作者 苟子安 张晓 +1 位作者 吴东南 王艳秋 《计算机应用》 CSCD 北大核心 2020年第9期2586-2593,共8页

对运行在文件系统上的工作负载进行分析有助于优化分布式文件系统的性能,且对构建新型存储系统至关重要。由于工作负载的复杂性和规模多样性的增加,使用基于直觉的分析来显式地捕获工作负载踪迹的特征是不完备的。针对这一问题,提出了... 对运行在文件系统上的工作负载进行分析有助于优化分布式文件系统的性能,且对构建新型存储系统至关重要。由于工作负载的复杂性和规模多样性的增加,使用基于直觉的分析来显式地捕获工作负载踪迹的特征是不完备的。针对这一问题,提出了一个分布式日志分析与负载特征提取模型。首先,从分布式文件系统日志中根据关键字抽取出与读写相关的信息;其次,从统计与时序两方面对负载特征进行描述;最后,分析基于负载特征进行系统优化的可能。实验结果表明,提出的模型具有一定的可行性与准确性,且可以较为详细地给出负载统计与时序特征,具有低开销、高时效、易于分析等优点,可以用来指导具有相同特征的工作负载的合成、热点数据监测、系统的缓存预取优化。 展开更多

关键词 分布式文件系统 日志分析 负载特征 时序特征 性能优化

在线阅读 下载PDF 职称材料

国家高性能计算环境事件流系统的设计 被引量：1

8

作者 赵一宁 肖海力 《计算机科学与探索》 CSCD 北大核心 2019年第3期374-382,共9页

国家高性能计算环境是由中国众多国家级计算中心和高校的计算集群聚合而成的大型高性能计算环境,为国内研究人员提供优质计算资源。出于维护环境正常稳定运行的目的,环境管理人员需要获取环境内部所发生的各种事件信息,以确保及时迅速... 国家高性能计算环境是由中国众多国家级计算中心和高校的计算集群聚合而成的大型高性能计算环境,为国内研究人员提供优质计算资源。出于维护环境正常稳定运行的目的,环境管理人员需要获取环境内部所发生的各种事件信息,以确保及时迅速地对环境产生的问题进行处理。针对这种需求,设计了国家高性能计算环境事件流处理与分发系统,用于对环境各类事件进行收集和按类型分类,最终提供给对事件有需求的环境应用。在该系统中,事件工厂模块负责对环境的各种事件进行格式解析以及初步过滤和处理等加工工作,然后将加工过的事件封装为统一的接口格式对外发布。初步实现了事件流系统的各部分功能,将其部署到国家高性能计算环境中,并对该系统的事件处理延时进行测试。实验结果表明事件处理过程的延时很低,可以满足对事件时效性的要求。 展开更多

关键词 日志处理 事件流 大数据分析 高性能计算

在线阅读 下载PDF 职称材料

基于日志的系统任务模型推理工具及其应用 被引量：3

9

作者 高崇南 余宏亮 郑纬民 《计算机研究与发展》 EI CSCD 北大核心 2010年第8期1490-1496,共7页

分布式系统成为Internet应用的关键组成部分,理解其运行时行为成为验证系统设计、解决系统逻辑与性能错误的关键.已有工作需要程序员手工标注代码或网络数据包,提供描述请求处理和任务执行的相关信息,以抽取系统运行时路径.工作创新性... 分布式系统成为Internet应用的关键组成部分,理解其运行时行为成为验证系统设计、解决系统逻辑与性能错误的关键.已有工作需要程序员手工标注代码或网络数据包,提供描述请求处理和任务执行的相关信息,以抽取系统运行时路径.工作创新性地从系统日志中提取系统任务信息,推断出系统的层次结构任务模型,利用任务模型将系统运行时行为分解为有层次结构的任务实例.实际应用经验表明,利用日志提取的任务模型能够帮助理解系统运行时行为,并解决系统的性能问题. 展开更多

关键词 日志分析 任务模型 因果路径 性能分析 分布式系统

在线阅读 下载PDF 职称材料

基于模糊核聚类和主动学习的异常检测方法 被引量：4

10

作者 吕宗平 时熙然 顾兆军 《现代电子技术》 北大核心 2019年第20期53-57,63,共6页

针对日志数据的异常检测获取标记数据代价过高的问题,提出一种基于模糊核聚类与主动学习的算法,即KFCM?AL算法。首先将日志解析,之后利用模糊核聚类算法将待选样本在高维空间进行划分聚类,滤去样本冗余点,同时选取聚类中心进行标记构建... 针对日志数据的异常检测获取标记数据代价过高的问题,提出一种基于模糊核聚类与主动学习的算法,即KFCM?AL算法。首先将日志解析,之后利用模糊核聚类算法将待选样本在高维空间进行划分聚类,滤去样本冗余点,同时选取聚类中心进行标记构建初始分类器,最后结合主动学习利用较小的标记代价对异常检测模型进行优化。实验结果表明,所提方法能够利用较少的标记样本获取异常检测模型的性能提升。 展开更多

关键词 异常检测 模糊核聚类 主动学习 日志解析 聚类分析 性能对比

在线阅读 下载PDF 职称材料

P2P流媒体测量平台的设计与实现

11

作者 王浩然 李润知 +1 位作者 林予松 王宗敏 《广西大学学报（自然科学版）》 CAS CSCD 北大核心 2011年第A01期11-16,87,共7页

P2P流媒体技术已经成为互联网中的主要应用,为了保障和优化流媒体系统的服务质量,基于LStreamP2P流媒体直播系统,设计并实现了一个分布式、可扩展的P2P流媒体测量平台。采用被动测量的方法实时监控系统关键节点的性能参数信息,同时根据... P2P流媒体技术已经成为互联网中的主要应用,为了保障和优化流媒体系统的服务质量,基于LStreamP2P流媒体直播系统,设计并实现了一个分布式、可扩展的P2P流媒体测量平台。采用被动测量的方法实时监控系统关键节点的性能参数信息,同时根据系统记录的节点活动信息,统计、分析用户的网络行为,使管理人员能及时对系统进行实时监控,分析结果并反馈给系统的相应模块,实现动态拓扑调整和资源优化。实验表明,该测量平台对优化系统的服务质量提供了有效的辅助作用,有利于系统瓶颈的及时发现与预防。 展开更多

关键词 P2P流媒体 网络测量 实时监控 日志查询 性能分析

在线阅读 下载PDF 职称材料