[发明专利]电力规划数据采集方法、装置及智能终端

权利要求书

1.一种电力规划数据采集方法，其特征在于，包括：

根据预设的时间颗粒度，在电力大数据平台上获取电力内部数据；

基于Scrapy框架，获取互联网中的电力外部数据，通过网络安全协议将所述电力外部数据迁移至内网；

将所述电力内部数据及所述电力外部数据作为电力规划数据，传输至并行数据库，并将所述电力规划数据转换为预设类型的数据；

根据docker镜像，对所述预设类型的数据进行数据清洗和修补，得到目标电力规划数据，并将所述目标电力规划数据发送至数据仓库；

根据预设数据类型与预设数据表单规则的对应关系，对所述目标电力规划数据进行处理，得到目标数据库表并存储至所述数据仓库。

2.根据权利要求1所述的电力规划数据采集方法，其特征在于，所述根据预设的时间颗粒度，在电力大数据平台上获取电力内部数据，包括：

通过JDBC对接协议或ODBC对接协议与所述电力大数据平台对接；

根据CDC数据采集方式，按照预设的时间颗粒度采集所述电力大数据平台中的电力内部数据。

3.根据权利要求2所述的电力规划数据采集方法，其特征在于，在所述根据CDC数据采集方式，按照预设的时间颗粒度采集所述电力大数据平台中的内部数据之后，还包括：通过kettle工具对所述电力内部数据进行抽取、转换并传输至所述并行数据库。

4.如权利要求1所述的电力规划数据采集方法，其特征在于，所述基于Scrapy框架，获取互联网中的电力外部数据，通过网络安全协议将所述电力外部数据迁移至内网，包括：

基于Scrapy框架生成网络爬虫，通过所述网络爬虫访问发布所述电力外部数据的网站，根据所述电力外部数据的时间颗粒度，采集所述网站发布的所述电力外部数据；

将所述电力外部数据存储至中间数据库，基于电网内部的网络安全协议，对所述中间数据库存储的所述电力外部数据进行处理，并将处理后的所述电力外部数据上传至内网服务器。

5.根据权利要求1所述的电力规划数据采集方法，其特征在于，所述将所述电力规划数据转换为预设类型的数据，包括：

根据预设数据类型，对所述电力规划数据进行分类；

通过所述并行数据库的操作性数据层，将所述分类后的电力规划数据转换为对应的数据类型下的电力规划数据并进行存储。

6.如权利要求1所述的电力规划数据采集方法，其特征在于，所述预设类型的数据包括元数据、主数据以及交易数据；所述数据仓库为greenplum分布式数据库或OLAP数据库。

7.根据权利要求1所述的电力规划数据采集方法，其特征在于，所述根据预设数据类型与预设数据表单规则的对应关系，对所述目标电力规划数据进行处理，得到目标数据库表并存储至所述数据仓库，包括：

获取所述电力规划数据的数据类型；

预设数据类型与预设数据表单规则的对应关系，获取所述电力规划数据的数据表单规则；

根据所述数据表单规则，对所述电力规划数据进行处理，得到目标数据库表并存储至所述数据仓库。

8.根据权利要求1所述的电力规划数据采集方法，其特征在于，在所述根据预设数据类型与预设数据表单规则的对应关系，对所述目标电力规划数据进行处理，得到目标数据库表并存储至所述数据仓库之后，还包括：

根据所述电力规划数据创建数据字典，所述数据字典包括行政区划字典、产业定义字典、行业分类定义字典、节假日字典、能源构成字典、电价数据字典中的至少一种。