期刊导航
期刊开放获取
上海教育软件发展有限公..
期刊文献
+
任意字段
题名或关键词
题名
关键词
文摘
作者
第一作者
机构
刊名
分类号
参考文献
作者简介
基金资助
栏目信息
任意字段
题名或关键词
题名
关键词
文摘
作者
第一作者
机构
刊名
分类号
参考文献
作者简介
基金资助
栏目信息
检索
高级检索
期刊导航
共找到
1
篇文章
<
1
>
每页显示
20
50
100
已选择
0
条
导出题录
引用分析
参考文献
引证文献
统计分析
检索结果
已选文献
显示方式：
文摘
详细
列表
相关度排序
被引量排序
时效性排序
基于Spark的固网业务日志统计分析平台设计与应用
1
作者
杨茵
《电信科学》
北大核心
2017年第S2期277-284,共8页
在互联网时代中,人们通过网络传递信息,随着网络速度日益提升,信息的传递量也逐日增大,网络信息以日志数据的形式存在,这些数据背后蕴含着重要价值。对于海量的日志数据,仅靠当前传统单机数据分析方法已无法满足需求,以至于日志数据没...
在互联网时代中,人们通过网络传递信息,随着网络速度日益提升,信息的传递量也逐日增大,网络信息以日志数据的形式存在,这些数据背后蕴含着重要价值。对于海量的日志数据,仅靠当前传统单机数据分析方法已无法满足需求,以至于日志数据没有得到有效利用,因此需要探索新型高效统计分析方法来挖掘这些海量日志数据的价值。基于Spark流数据计算、HDFS分布式架构以及Kafka高吞吐分布式系统搭建一款适合固网业务日志数据实时分析的统计平台,实现快速查询统计、个性化数据统计任务定制和实时日志数据监控,协助运维人员及时发现问题,避免故障发生。
展开更多
关键词
HADOOP
Kafka
SPARK
STREAMING
实时日志分析
在线阅读
下载PDF
职称材料
题名
基于Spark的固网业务日志统计分析平台设计与应用
1
作者
杨茵
机构
中国电信股份有限公司广东分公司网络监控维护中心
出处
《电信科学》
北大核心
2017年第S2期277-284,共8页
文摘
在互联网时代中,人们通过网络传递信息,随着网络速度日益提升,信息的传递量也逐日增大,网络信息以日志数据的形式存在,这些数据背后蕴含着重要价值。对于海量的日志数据,仅靠当前传统单机数据分析方法已无法满足需求,以至于日志数据没有得到有效利用,因此需要探索新型高效统计分析方法来挖掘这些海量日志数据的价值。基于Spark流数据计算、HDFS分布式架构以及Kafka高吞吐分布式系统搭建一款适合固网业务日志数据实时分析的统计平台,实现快速查询统计、个性化数据统计任务定制和实时日志数据监控,协助运维人员及时发现问题,避免故障发生。
关键词
HADOOP
Kafka
SPARK
STREAMING
实时日志分析
分类号
TP311.13 [自动化与计算机技术—计算机软件与理论]
TP393.0 [自动化与计算机技术—计算机应用技术]
在线阅读
下载PDF
职称材料
题名
作者
出处
发文年
被引量
操作
1
基于Spark的固网业务日志统计分析平台设计与应用
杨茵
《电信科学》
北大核心
2017
0
在线阅读
下载PDF
职称材料
已选择
0
条
导出题录
引用分析
参考文献
引证文献
统计分析
检索结果
已选文献
上一页
1
下一页
到第
页
确定
用户登录
登录
IP登录
使用帮助
返回顶部
