-
题名流计算与内存计算架构下的运营状态监测分析
被引量:2
- 1
-
-
作者
赵永彬
陈硕
刘明
王佳楠
贲驰
-
机构
国网辽宁省电力有限公司信息通信调度监控中心
中国科学院沈阳计算技术研究所
中国科学院大学
国家电网公司东北电力调控分中心
-
出处
《计算机应用》
CSCD
北大核心
2017年第10期3029-3033,共5页
-
基金
辽宁电力公司科技项目(SGLNXT00DKJS1600242)~~
-
文摘
为满足对电网实时运营状态分析过程中对用户实时用电量数据等大规模实时数据进行实时分析处理的需求,实现对电网运营决策提供快速准确的数据分析支持,提出一种流计算与内存计算相结合的大规模数据分析处理的系统架构。将经过时间窗划分的用户实时用电量数据进行离散傅里叶变换(DFT),实现对异常用电行为评价指标的构建;将基于抽样统计分析构造出的用户用电行为特征,采用K-Means聚类算法实现对用户用电行为类别的划分。从实际业务系统中抽取实验数据,验证了提出的异常用电行为和用户用电分析评价指标的准确性。同时,在实验数据集上与传统的数据处理策略进行对比,实验结果表明流计算与内存计算相结合的系统架构在大规模数据分析处理方面更具优势。
-
关键词
流计算
内存计算
特征构建
异常监测
行为划分
-
Keywords
stream computing
memory computing
feature construction
anomaly detection
behavior partition
-
分类号
TP39
[自动化与计算机技术—计算机应用技术]
-
-
题名采用分布式DBSCAN算法的用电行为分析
被引量:9
- 2
-
-
作者
赵永彬
陈硕
刘明
王佳楠
贲驰
-
机构
国网辽宁省电力有限公司信息通信调度监控中心
中国科学院沈阳计算技术研究所
中国科学院大学
国家电网东北电力调控分中心
-
出处
《小型微型计算机系统》
CSCD
北大核心
2018年第5期1108-1112,共5页
-
基金
辽宁电力公司科技项目(SGLNXT00DKJS1600242)资助
-
文摘
作为描述电网运营状态的重要依据,用户实时用电量数据在各时间段内的均值、方差及离散傅里叶变换(DFT)分量等统计变换结果是用电行为特征提取的重要建模参数.基于密度聚类的DBSCAN算法能够对空间内样本点进行更加准确可靠的类别划分.层次聚类的子域划分、域内聚类和聚类合并的过程为DBSCAN算法的分布式实现提供重要参考.根据DBSCAN算法中的密度参数,保留各子簇的边界特征样本,使子簇合并过程的计算效率进一步提高.以Spark为代表的分布式内存计算系统将数据处理的中间结果存入内存,降低读写开销,为大规模数据的迭代分析提供快捷高效的处理环境.实验结果证明,在内存计算系统中实现的分布式DBSCAN聚类算法能够准确高效的实现大规模用户用电行为分析.
-
关键词
行为提取
层次聚类
簇边界特征
分布式内存计算
-
Keywords
behavior extraction
hierarchical clustering
cluster boundary feature
distributed memory computing
-
分类号
TP391
[自动化与计算机技术—计算机应用技术]
-