基于CEP引擎的配电网运行监控信号大数据ETL方法

葛贤军， 艾明浩， 李志宏， 汪 旭， 陈乃仕

(中国电力科学研究院，北京 100192)

基于CEP引擎的配电网运行监控信号大数据ETL方法

葛贤军， 艾明浩， 李志宏， 汪 旭， 陈乃仕

(中国电力科学研究院，北京 100192)

电力系统规模在不断扩大，配电网电气设备数量急剧增长且趋于精细化。大量且散乱的运行监控数据使得主动配电网各应用无法快速有效地提取有用信息以形成决策支持。本文利用复杂事件处理(CEP)引擎作为运行监控信号处理核心，通过Apriori机器学习算法定义和完善规则库，通过核心算法库对信号数据流进行规范化处理。整体采用ETL(Extract-Transform-Load)框架，将主动配电网中分散、零乱、标准不统一的信号数据整合、清洗后加载到数据仓库，并以多种数据接口输出至不同介质，供不同应用调用。基于CEP引擎的大数据ETL方法，可对运行监控信号进行快速、精确、有效的规范化处理，实现多数据源集成与输出，为主动配电网设备仿真、故障分析、状态估计等多种重要应用提供数据准备。

CEP引擎； 运行监控； 大数据； ETL； 主动配电网； 规范化

1 引言

我国电力产业的迅速发展,主动配电网及全球能源互联网等建设进程的加快，电气设备运行监控信号作为构建各类电力自动化系统的基础，其应用和地位越来越重要。由于各地电网采用不同厂家、不同类型的电气设备，各种设备产生的运行监控信号格式和命名方式种类繁多且数量巨大，因此，目前电气设备运行监控信号数据具有海量化、多样化、复杂化特点，呈大数据趋势[1]。……