[发明专利]一种电力数据目录构建系统

说明书

本发明涉及数据管理，具体涉及一种电力数据目录构建系统，包括服务器，服务器通过负载模型构建模块构建用于采集用电数据的负载模型，并通过采集集群构建模块构建以负载模型为个体的用电数据采集集群，同时通过通信服务构建模块建立用电数据采集集群之间的数据通信，用电数据采集集群之间优选最优通信效率路径，将采集用电数据发送给服务器；本发明提供的技术方案能够有效克服现有技术所存在的无法对海量多源异构数据进行快速准确调用的缺陷。

技术领域

本发明涉及数据管理，具体涉及一种电力数据目录构建系统。

背景技术

随着特高压交直流混合电网的大规模建设以及“大运行”体系建设的全面推进，电网调度控制系统的服务范围快速扩大，数据来源增多，数据类型多样，数据规模和存储压力急剧增大，调控业务对海量多源数据的高效存储与快速处理等方面的要求不断提升。

目前，电力调度控制系统中使用的数据库以关系型数据库为主，关系型数据库是一种建立在关系模型基础上的数据库，借助于集合代数等数学概念及方法来处理数据库中的数据，具有稳定、安全等特点。除此之外，也有部分系统采用非关系型数据库如Hbase等，来解决海量多源异构数据的存储难题，非关系型数据库相对于关系型数据库具有更高的数据存储能力，特别针对于非结构化和半结构化数据，是解决智能化存储数据资源目录难题的一个常用方法。

但是，电力调度控制系统所涉及的数据种类繁多，包括实时数据、历史数据、模型数据等结构化数据，高频变化的时间序列数据，还有CIM/G、CASE断面等非结构化数据。由于不同业务对数据访问性能要求不同，单一的数据库存储技术无法满足所有业务对数据的存储、查询等性能要求，且并行处理大数据的能力较低，建设成本高，导致电力调度控制系统在面对海量多源异构数据时遇到技术瓶颈。

发明内容

(一)解决的技术问题

针对现有技术所存在的上述缺点，本发明提供了一种电力数据目录构建系统，能够有效克服现有技术所存在的无法对海量多源异构数据进行快速准确调用的缺陷。

(二)技术方案

为实现以上目的，本发明通过以下技术方案予以实现：

一种电力数据目录构建系统，包括服务器，所述服务器通过负载模型构建模块构建用于采集用电数据的负载模型，并通过采集集群构建模块构建以负载模型为个体的用电数据采集集群，同时通过通信服务构建模块建立用电数据采集集群之间的数据通信，所述用电数据采集集群之间优选最优通信效率路径，将采集用电数据发送给服务器；

所述服务器通过信息数据获取模块获取关于构建、训练数据资产分类模型的信息数据，所述服务器通过分类模型构建模块基于信息数据构建初始分类模型，并通过分类模型训练单元基于信息数据对初始分类模型进行训练，得到数据资产分类模型，所述服务器通过数据资产分类模块对采集用电数据进行数据分类，并构建数据资产目录。

优选地，所述负载模型构建模块通过利用无向图构建考虑供需平衡的负载模型，所述负载模型在传输采集用电数据时，计算当前节点至目标节点涉及所有边的通信效率，并选择最优通信效率路径进行数据传输。

优选地，所述采集集群构建模块建以负载模型为个体的用电数据采集集群，包括：

基于事件监听器、异步通知和文件目录结构，构建弹性扩展的用电数据采集集群，具体步骤如下：

S1、创建永久节点，并将永久节点作为所有用电数据采集集群的根节点；

S2、用电数据采集集群启动时，在根节点下创建临时节点，并写入自己的节点编号；

S3、用电数据采集集群向根节点注册事件监听器，当事件监听器监听到临时节点变化时，获取对应节点编号，并更改变更标识；