[发明专利]一种基于分布式日志分析的电力系统运行状态监视方法

说明书

本发明公开了一种基于分布式日志分析的电力系统运行状态监视方法，包括如下步骤：S1，获取电力系统的日志信息，并将其合并成日志文件；S2，将日志文件进行分割，对其进行处理得到统一格式的日志信息，使日志文件中的日志信息逐条序列化输出到分布式存储系统中；S3，从分布式存储系统中提取日志信息，结合Map‑Reduce机制，采用基于状态噪点移除聚类的日志分析算法对日志信息进行分类处理，并通过对分类后的日志信息进行分析来监视系统运行状态。本发明在系统发生异常时，能及时发现电力系统运行状态的异常，并在第一时间进行处理，有效满足电力系统及时、高效的运行要求。

技术领域

本发明涉及一种电力系统运行状态监视方法，尤其涉及一种基于分布式日志分析的电力系统运行状态监视方法，属于电力系统调度技术领域。

背景技术

随着电网规模的日趋扩大和复杂程度的不断增加，特高压互联大电网对电网的一体化运行和统一协调控制提出了新的要求，国家对电网安全、稳定、经济、环保运行的要求也越来越高。电力大数据应运而生，它是大数据理念、技术和方法在电力行业的实践，电力大数据涉及到发电、输电、变电、配电、用电、调度各环节，综合了跨单位、跨专业、跨业务的数据分析、挖掘与数据可视化的功能。

在电力系统调度环节中，随着智能电网调度技术支持系统的投运，电网数据采集范围和类型不断扩展，在满足对互联大电网全方位的实时监控等方面起到了重要作用。目前，各级调控中心已建成以智能电网调度技术支持系统为核心的一系列调度生产管理运行系统，主要有SCADA/EMS、WAMS、水电及新能源、二次设备在线监视与分析、调度计划、安全校核、调度管理等系统，系统已投入运行，基本满足调度生产需要，在调度生产管理中发挥重要作用。

电力系统的安全稳定运行需要继电保护和自动装置等就地装置的保护，但仅仅依靠这些就地装置还不能完全保证电力系统的安全运行，因为这些装置往往都是根据局部的信息来处理电力系统的故障，而不能以全局的信息来预测、分析系统的运行情况和处理系统中出现的各种复杂问题，为此，用于系统运行状态监视的日志分析技术亟待开发。

目前，国内电力企业的系统日志分析技术尚不成熟，大多数系统故障的发现还依赖于故障报警及人力核查，而很多情况下，当故障报警或人力核查发现故障时，系统已经发生了很长时间的异常运行，不能及时发现系统的运行异常，并在第一时间进行处理，大大延长了系统的运维时间，不能满足电网系统及时、高效的运行要求。除此之外，电力企业每天可能会有很多不同的数据分析需求，提供的日志数据也是多样化的，如何对多样化的日志数据进行统一分析处理，也是一个急需解决的问题。

发明内容

本发明所要解决的技术问题在于提供一种基于分布式日志分析的电力系统运行状态监视方法。

为实现上述发明目的，本发明采用下述的技术方案：

一种基于分布式日志分析的电力系统运行状态监视方法，包括如下步骤：

S1，获取电力系统的日志信息，并将其合并成日志文件；

S2，将日志文件进行分割，对其进行处理得到统一格式的日志信息，使日志文件中的日志信息逐条序列化输出到分布式存储系统中；

S3，从分布式存储系统中提取日志信息，结合Map-Reduce机制，采用基于状态噪点移除聚类的日志分析算法对日志信息进行分类处理，并通过对分类后的日志信息进行分析来监视电力系统运行状态。

其中较优地，在步骤S1中，获取所述日志信息时采用基于syslog方式的日志扫描抓取方法。

其中较优地，所述日志扫描抓取方法包括如下步骤：

S11，将位于电力系统各节点上的各个种子模块抓取的日志信息进行选取合并，得到本节点的各类日志信息；