-
题名大规模时间序列分析框架的研究与实现
被引量:11
- 1
-
-
作者
滕飞
黄齐川
李天瑞
王晨
田春华
-
机构
西南交通大学信息科学与技术学院
中铁一院轨道交通工程信息化国家重点实验室
清华大学大数据系统软件国家工程实验室
-
出处
《计算机学报》
EI
CSCD
北大核心
2020年第7期1279-1292,共14页
-
基金
国家重点研发计划项目(2018YFB1701502)
四川省科技计划(2019YJ0214)资助.
-
文摘
工业互联时代,每天数以亿计的传感器源源不断生成时间序列,用以记录工业设备的温度、振动、压力、曲度和张力等参数.如何从这些非结构化的时间序列中挖掘出有价值信息,并运用于状态监测、故障诊断和控制决策,引起了广泛的关注和研究.随着数据规模日益增长,能够提供较为完备数据分析算法库的主流单机环境如Matlab、R等已无法较好地应对大规模时间序列分析场景下的数据处理需求.而现有的并行分析算法数量有限,常与平台相互绑定,更换平台需对算法进行二次开发,可扩展性较差.本文旨在设计一种通用的近似解分析框架,支持第三方算法快速实现并行化,解决因数据规模过大而导致的算法适用性问题.分析框架主要包含任务划分、治理和合并三个步骤.任务划分通过冗余保留了数据的局部相关性,生成相互独立的子任务,减少分布式节点之间的数据通信和同步开销.对于任务划分问题,本文提出了近似解代价模型,得到了最优的任务划分方案.基于Spark平台设计并实现了原型系统,实验结果表明,该系统在确保分析结果准确性的前提下,其加速能力随着并行程度保持近似线性的增长,解决了单机算法的数据规模受限问题.同时,该系统易于集成与扩展,使数据分析人员免于算法重复开发.
-
关键词
时间序列
算法并行化
近似解
分治
SPARK
-
Keywords
time series
data parallel
approximate solution
divide and conquer
spark
-
分类号
TP391
[自动化与计算机技术—计算机应用技术]
-
-
题名工业互联网平台:发展趋势与挑战
被引量:77
- 2
-
-
作者
王晨
宋亮
李少昆
-
机构
清华大学大数据系统软件国家工程实验室
四川省工业大数据创新中心
四川省经济与信息化委员会
-
出处
《中国工程科学》
CSCD
北大核心
2018年第2期15-19,共5页
-
基金
中国工程院咨询项目"‘互联网+’行动计划的发展战略研究"(2016-ZD-03)
国家自然科学基金项目"面向工业应用的大数据分析理论与关键技术"(U1509213)
-
文摘
随着制造业和新一代互联网、信息化技术的融合,工业互联网高速发展。无论是国际制造业的领先企业,还是我国的制造业国家战略都明确了工业互联网平台研发的重要性。本文对工业互联网平台的发展趋势进行了阐释,并对平台在用户生态、开发者生态和数据生态构建中的挑战展开了分析,并有针对性地探讨了工业互联网平台在工业大数据系统与工业数据建模和分析方面所遇到的技术挑战。
-
关键词
工业互联网平台
工业大数据
数据分析
-
Keywords
industry Internet platform
industrial big data
data analytics
-
分类号
TP31
[自动化与计算机技术—计算机软件与理论]
-
-
题名网络攻击模型研究综述
被引量:23
- 3
-
-
作者
平国楼
叶晓俊
-
机构
清华大学软件学院
清华大学大数据系统软件国家工程实验室
-
出处
《信息安全研究》
2020年第12期1058-1067,共10页
-
基金
国家重点研发计划项目(2019QY1402)。
-
文摘
随着信息技术的快速发展,网络攻击逐渐呈现多阶段、分布式和智能化的特性,单一的防火墙、入侵检测系统等传统网络防御措施不能很好地保护开放环境下的网络系统安全.网络攻击模型作为一种攻击者视角的攻击场景表示,能够综合描述复杂多变环境下的网络攻击行为,是常用的网络攻击分析与应对工具之一.首先介绍主要网络攻击模型,包括传统树、图、网结构模型和现代杀伤链、ATT&CK、钻石模型等;然后再对网络攻击模型的分析与应用进行说明,其中以求解攻击指标为目的的分析过程主要包括概率框架、赋值方法和求解方法,基于生命周期的攻击模型应用则包括了攻击者视角和防守者视角的应用过程;最后总结了网络攻击模型及其分析应用的现有挑战与未来方向.
-
关键词
网络系统安全
攻击行为
攻击模型
攻击模型分析
攻击模型应用
-
Keywords
network system security
attack behavior
attack model
analysis of attack model
application of attack model
-
分类号
TP393
[自动化与计算机技术—计算机应用技术]
-