[发明专利]一种基于大数据的人工智能电力调度决策系统

权利要求书

1.一种基于大数据的人工智能电力调度决策系统，其特征在于：包括：

数据爬取模块：利用Focused Crawler软件开发，从国内外行业网站、多媒体中搜索获取与电力行业相关的数据源；

数据库储存模块：用于储存数据爬取模块获取的数据源；

数据库管理模块：利用MySQL数据库的智能管理，对数据库储存模块中的数据源进行处理，处理包括过滤无用信息、去重纠错、提取标签、数据安全管理；

数据处理分析模块：基于Python网络对数据库储存模块中的数据进行分析处理，同时结合Sharksearch算法，分析数据信息与主题的相关性，完成对数据库储存模块中数据源的归类处理；

专业数据信息库：通过数据处理分析模块对数据的归类处理，并通过正则表达式匹配信息数据，建立与电力行业相关的专业性数据信息库，用以对归类处理之后的数据源进行储存管理；

索引生成单元：用于根据专业数据信息库中归类的数据源，生成索引；

Web页面：用于向专业数据信息库中输入需要检索的关键字信息；

检索优化模块：用于对Web页面检索的信心进行优化处理和推荐展示；

数据统计模块：用于对专业数据信息库中收集的数据源进行统计分析；

电力调度信息可视化平台：根据数据统计模块对专业数据模块中数据源的统计，建立电力调度信息可视化平台，电力调度信息可视化平台内部包括地区分布模块、数据分类占比模块、数据下载记录模块；

地区分布模块：用于每个地区的数据源的统计；

数据分类占比模块：用于根据数据源划分的种类，对数据源进行分类统计；

数据下载记录模块：用于记录统计从专业信息库中下载的数据源情况；

信息爬取时间识别模块：用于识别爬取的数据源的入网时间；

最新信息推送模块：用于将最新发布的与电力行业相关的信息自动推送到Web页面。

2.根据权利要求1所述的一种基于大数据的人工智能电力调度决策系统，其特征在于：所述数据爬取模块中，数据爬取的具体过程包括以下过程：

S1、通过Focused Crawler软件开发建立初始化待爬取URL序列；

S2、利用待爬取URL序列搜索电力行业网站和多媒体页面；

S3、当搜索页面为空时，数据爬取结束，当搜索到与电力行业相关的页面时，下载URL对应的页面内容；

S4、页面下载成功时，将URL加入已爬取列表，并继续分析处理文档，当页面下载失败时，选择是否重试，当不需要重试时，将URL加入已爬取列表，并添加相关的异常处理和日志记录，当需要重试时，重复S2-S3；

S5、将URL加入已爬取列表时，选择是否收集页面，需要收集页面时，会将页面作为有效数据，并储存到数据库模块中；

S6、当不需要收集时，判断URL为有价值的URL，并继续重复S2-S5。

3.根据权利要求1所述的一种基于大数据的人工智能电力调度决策系统，其特征在于：所述数据爬取模块中获取的数据源包括电力行业政策、论文、成果、技术、研发方向、产品、规划信息。

4.根据权利要求1所述的一种基于大数据的人工智能电力调度决策系统，其特征在于：所述数据分类占比模块中数据的分类包括标准、文献、软著、专利。

5.根据权利要求1所述的一种基于大数据的人工智能电力调度决策系统，其特征在于：所述地区分布模块、数据分类占比模块和数据下载记录模块之间两两相连。

6.根据权利要求1所述的一种基于大数据的人工智能电力调度决策系统，其特征在于：所述Web页面有多个，Web页面之间为网络连接。