[发明专利]基于大数据技术的电网量测数据智能处理系统

说明书

本发明提供了基于大数据技术的电网量测数据智能处理系统，包括依次连接的数据接入模块、预处理模块、分析模块，其中数据接入模块用于接收多个数据采集模块发送的智能电网量测数据，其中数据采集模块用于采集所在监测节点上的智能电网量测数据；所述预处理模块用于对数据接入模块接收的智能电网量测数据进行预处理，预处理模块包括聚类处理单元、异常检测单元，聚类处理单元用于对智能电网量测数据进行聚类处理，异常检测单元用于对聚类处理后的智能电网量测数据进行异常检测，对检测出的异常智能电网量测数据进行标记，并将所有的智能电网量测数据发送至分析模块；所述的分析模块用于对预处理后的智能电网量测数据进行建模分析处理。

技术领域

本发明涉及电网量测数据处理技术领域，具体涉及基于大数据技术的电网量测数据智能处理系统。

背景技术

随着智能电网信息化不断发展，调度自动化和采集监测类系统积累了海量的电网量测数据，量测数据作为电网领域四大数据类型之一，是设备状态监测、辅助决策分析、大数据挖掘的重要基础。目前，采用电网量测数据进行设备状态分析时，直接采用采集的电网量测数据进行建模，而电网量测数据本身存在的缺陷将会大大降低建模分析的精度。

发明内容

针对上述问题，本发明提供基于大数据技术的电网量测数据智能处理系统。

本发明的目的采用以下技术方案来实现：

提供了基于大数据技术的电网量测数据智能处理系统，包括依次连接的数据接入模块、预处理模块、分析模块，其中数据接入模块用于接收多个数据采集模块发送的智能电网量测数据，其中数据采集模块用于采集所在监测节点上的智能电网量测数据；所述预处理模块用于对数据接入模块接收的智能电网量测数据进行预处理，预处理模块包括聚类处理单元、异常检测单元，聚类处理单元用于对智能电网量测数据进行聚类处理，异常检测单元用于对聚类处理后的智能电网量测数据进行异常检测，对检测出的异常智能电网量测数据进行标记，并将所有的智能电网量测数据发送至分析模块；所述的分析模块用于对预处理后的智能电网量测数据进行建模分析处理。

优选地，聚类处理单元对智能电网量测数据进行聚类处理，具体包括：

(1)对存在0值或负值的智能电网量测数据进行预处理，将0值或负值替换为预先设定的替代值，提取设定时间段的智能电网量测数据作为一个智能电网量测数据集，设为X；

(2)在第一次迭代时，选择智能电网量测数据集X中的第一个未标记的智能电网量测数据作为第一个簇中心点O₁，计算其余智能电网量测数据与该簇中心点O₁之间的相似度，若智能电网量测数据x_i与簇中心点O₁之间的相似度大于设定的相似度阈值，则将智能电网量测数据x_i分配到该簇中心点O₁，并进行标记；

(3)令迭代次数λ加1，选择智能电网量测数据集X中的第一个未标记的智能电网量测数据作为另一个簇中心点O_λ+1，计算其余智能电网量测数据与该簇中心点O_λ+1之间的相似度；

智能电网量测数据x_j未标记时，若智能电网量测数据x_j与O_λ+1之间的相似度大于设定的相似度阈值，则将智能电网量测数据x_j分配到该簇中心点O_λ+1，并进行标记；

智能电网量测数据x_j已标记时，当智能电网量测数据x_j与O_λ+1之间的相似度大于设定的相似度阈值并且满足再分配条件时，将智能电网量测数据x_j分配到该簇中心点O_λ+1，其余情况不对已标记的智能电网量测数据x_j作任何操作；