-
题名配电网准实时数据的倒排二级索引集群均衡处理技术
被引量:25
- 1
-
-
作者
屈志坚
王子潇
池瑞
洪应迪
范明明
衣晚卓
-
机构
华东交通大学电气与自动化工程学院
-
出处
《中国电机工程学报》
EI
CSCD
北大核心
2020年第20期6494-6505,共12页
-
基金
国家自然科学基金项目(51867009)
江西省杰出青年人才计划项目(20162BCB23045)
江西省重点研发计划项目(20192BBEL50006)。
-
文摘
针对配电网的准实时数据体量越来越大、数据节点任务不均衡的问题,在集群框架的基础上建立倒排索引数据结构,提出一种准实时数据的二级索引集群均衡处理技术。以建立的索引集群查询时间模型作为拓扑选择策略依据,综合运用一致性哈希数据分发策略和基于分流轮询策略改进的带权重定向任务分配法,实现集群配置相同情况下对海量配电网准实时数据查询速度的提升。以铁路供电监控系统导出的亿级工程数据为算例,进行集群响应测试和分布式死锁测试。结果表明:拓扑选择策略有助于避免拓扑规划不合理导致的查询耗时增长,带权重定向任务分配法可使并发量小于可用服务线程数5倍时的查询耗时降低50%以上,并显著减小分布式死锁出现的概率。
-
关键词
集群
准实时数据
配电网
数据采集与监视控制系统
-
Keywords
cluster
quasi-real-time data
distribution network
SCADA
-
分类号
TM76
[电气工程—电力系统及自动化]
-
-
题名集群排队的铁道供电海量准实时数据异步并行查询
被引量:3
- 2
-
-
作者
屈志坚
赵亮
范明明
-
机构
华东交通大学电气与自动化工程学院
常州市轨道交通发展有限公司
-
出处
《铁道学报》
EI
CAS
CSCD
北大核心
2018年第6期67-74,共8页
-
基金
国家自然科学基金(51567008)
江西省杰出青年人才计划(20162BCB23045)
+2 种基金
江西省自然科学基金(20161BAB206156
20171BAB206044)
江西省教育厅科技研究项目(GJJ160471)
-
文摘
针对铁道供电的海量准实时数据查询效率不高造成信息处理效率低下的问题,提出一种基于集群队列模型的铁道供电监控海量信息快速异步并行查询新方法。基于实时Ajax数据引擎,综合运用MPP查询架构,建立供电监控信息的轮询队列模型,实现海量准实时数据在铁道供电监控系统中的快速查询处理。以四机集群和一台查询测试机为平台,以铁道10kV配电网远动调度监控千万级时序数据为算例,进行加载测试和集群查询性能测试。结果表明:MPP结合Ajax异步回调机制,集群磁盘I/O的读取速度约为存储速度的10倍,能够将查询服务器端的交互更新降至数百毫秒级,验证了新的集群监控方法优于常规双数据库服务器并列运行的模式。
-
关键词
铁道供电
准实时数据
大数据引擎
大数据查询
-
Keywords
railway power supply
quasi real time data
big data engine
big data query
-
分类号
TM73
[电气工程—电力系统及自动化]
-
-
题名配电网SCADA时序数据集群的RWI快速查询技术
被引量:3
- 3
-
-
作者
屈志坚
赵亮
陈鼎龙
-
机构
华东交通大学电气工程学院
广州铁路集团公司广州供电段
-
出处
《中国电机工程学报》
EI
CSCD
北大核心
2018年第17期5085-5096,共12页
-
基金
国家自然科学基金项目(51867009,51567008)
江西省杰出青年人才计划项目(20162BCB23045)
江西省自然科学基金项目(20171BAB206044)~~
-
文摘
针对配电网大量调度监控准实时数据查询效率不高的问题,利用富网络组件容器和大数据二级索引机制将配电大数据嵌入到大规模并行处理(massively parallel processor,MPP)查询引擎中,提出一种跨平台的配电网数据RWI快速查询新方法。综合运用Impala数据守护进程,实现大量准实时数据在调度监控应用的快速查询。以铁路10k V配电网监控系统工程导出的数千万级实际时序数据为算例,进行加载测试和集群查询性能测试。结果表明:基于二级索引的RWI方法异步回调机制,在正常运行下的集群磁盘I/O读取速度约为存储速度的10倍,能将大数据集群与监控界面端异步回调接口间的数据延迟降至数百ms级,合理提高集群性能,能够适当地提升海量数据响应能力,但远低于扩大集群节点数对海量数据响应能力的提升效果。
-
关键词
准实时数据
大规模并行处理引擎
配电网
大数据查询
-
Keywords
quasi-real-time data
massively parallelprocessor engine
distribution network
big data query
-
分类号
TM73
[电气工程—电力系统及自动化]
-
-
题名东莞电网运行方式实时生成系统的研究与应用
被引量:1
- 4
-
-
作者
孔慧超
袁炜灯
何建宗
马志强
-
机构
广东电网公司东莞供电局
广东省电机工程学会
-
出处
《广东电力》
2012年第11期68-71,95,共5页
-
文摘
针对东莞电网运行方式工作中多方位的需求,提出利用小型离线电网分析软件(如BPA软件)与能量管理系统实时数据库连接来搭建准实时分析平台,生成电网运行方式的思路。介绍了模块集成、实时数据接口、实时运行方式生成、准实时数据库等关键模块的开发要点,以应用实例说明该电网运行方式实时生成系统对开展安全风险评估和运行统计有普遍的应用意义。
-
关键词
电力网
运行方式
能量管理系统
准实时数据库
-
Keywords
power network
run mode
energy management system
quasi real time database
-
分类号
TP319
[自动化与计算机技术—计算机软件与理论]
TM732
[电气工程—电力系统及自动化]
-