[发明专利]一种实现数字能源管理系统的分布式计算方法

权利要求书

1.一种实现数字能源管理系统的分布式计算方法，其特征是基于数字能源管理系统，利用NoSQL方式创建数据仓库，其中利用非关系型数据库及数据库引擎将多种数据源的数据组织成目标数据库支持的格式，并为组织好的每条数据建立全文索引，存入目标数据库，形成数据仓库，

搭建Hadoop分布式环境，所述Hadoop分布式环境包括Hadoop的主节点和子节点，所述主节点分为任务处理主节点和数据存储主节点，所述子节点分为任务处理子节点和数据存储子节点，

根据数字能源管理系统的计算任务，通过任务处理主节点将任务进行分片处理，将子任务分发至任务处理子节点，任务处理子节点根据子任务获取所述数据仓库中相关增量数据进行数据分析计算。

2.根据权利要求1所述的一种实现数字能源管理系统的分布式计算方法，其特征是所述利用NoSQL方式创建数据仓库，包括：

将数据源的数据通过定时任务或实时的方式接入所述数据仓库。

3.根据权利要求1或2所述的一种实现数字能源管理系统的分布式计算方法，其特征是所述任务处理子节点进行数据分析计算之前，包括：

从所述数据仓库取出相关增量数据，经过Map数据映射之后转存入HDFS，

将从HDFS中取出所述相关增量数据交给数据存储主节点，由数据存储主节点指定所述相关增量数据的存储位置，并通知任务处理主节点执行数据分析计算任务流程。

4.根据权利要求3所述的一种实现数字能源管理系统的分布式计算方法，其特征是所述任务处理子节点进行数据分析计算，包括：

任务处理主节点指定所述任务处理子节点执行数据分析计算任务，

进行所述数据分析计算任务的数据分析和数据挖掘的处理操作，

将处理操作的结果写回HDFS，并存入所述数据仓库。

5.一种实现数字能源管理系统的分布式计算系统，其特征是基于Hadoop系统，在Hadoop分布式环境下，包括Hadoop的主节点和子节点，所述主节点分为任务处理主节点和数据存储主节点，所述子节点分为任务处理子节点和数据存储子节点，

所述分布式计算系统还包括NoSQL数据仓库，所述NoSQL数据仓库根据数字能源管理系统利用NoSQL方式创建，其中利用非关系型数据库及数据库引擎将多种数据源的数据组织成目标数据库支持的格式，并为组织好的每条数据建立全文索引，存入目标数据库，形成数据仓库，

所述分布式计算系统根据数字能源管理系统的计算任务，通过任务处理主节点将任务进行分片处理，将子任务分发至任务处理子节点，任务处理子节点根据子任务获取所述数据仓库中相关增量数据进行数据分析计算。

6.根据权利要求5所述的一种实现数字能源管理系统的分布式计算系统，其特征是将数据源的数据通过定时任务或实时的方式接入所述NoSQL数据仓库。

7.根据权利要求5或6所述的一种实现数字能源管理系统的分布式计算方法，其特征是所述任务处理子节点进行数据分析计算之前，包括：

从所述NoSQL数据仓库取出相关增量数据，经过Map数据映射之后转存入HDFS，

将从HDFS中取出所述相关增量数据交给数据存储主节点，由数据存储主节点指定所述相关增量数据的存储位置，并通知任务处理主节点执行数据分析计算任务流程。

8.根据权利要求7所述的一种实现数字能源管理系统的分布式计算方法，其特征是所述任务处理子节点进行数据分析计算，包括：

任务处理主节点指定所述任务处理子节点执行数据分析计算任务，

进行所述数据分析计算任务的数据分析和数据挖掘的处理操作，

将处理操作的结果写回HDFS，并存入所述NoSQL数据仓库。