[发明专利]一种互联网监管领域的数据智能提取对接系统

权利要求书

1.一种互联网监管领域的数据智能提取对接系统，其特征在于,其包括表现层、控制层、逻辑层、数据持久层；

在表现层，用户通过可视化页面配置获取第三方数据的接口模板，并动态创建获取第三方数据的定时任务，随后，配置的接口模板和定时任务传送至控制层；

控制层接收接口模板的配置信息，并启动定时任务；

在逻辑层，首先基于定时任务查找、解析与第三方数据相对应的接口模板，获取第三方数据的请求方式，随后获取第三方数据，再随后基于接口模板解析第三方数据，最后将解析得到的数据导出至数据持久层，进行持久化处理。

2.根据权利要求1所述的一种互联网监管领域的数据智能提取对接系统，其特征在于，所述表现层包括用户交互模块和模板定制模块；

用户通过模板定制模块来定制接口模板；

用户通过用户交互模块的可视化页面对定制的接口模板进行配置。

3.根据权利要求2所述的一种互联网监管领域的数据智能提取对接系统，其特征在于，接口模板的配置信息包括数据获取规则、数据解析规则、数据导出规则和定时规则。

4.根据权利要求1所述的一种互联网监管领域的数据智能提取对接系统，其特征在于，控制层通过Hutool框架进行定时任务的动态配置与监听。

5.根据权利要求1-4中任一项所述的一种互联网监管领域的数据智能提取对接系统，其特征在于，所述逻辑层包括定时任务运行模块、数据请求模块、数据解析模块、数据导出模块；

所述定时任务运行模块用于定时获取第三方数据；

所述数据请求模块用于根据定时任务查找相对应的接口模板，并进一步解析接口模板的配置信息，获取第三方数据的请求方式；

所述数据解析模块用于根据接口模板的配置信息解析并处理第三方数据；

所述数据导出模块用于导出所述数据解析模块输出的数据，并传送至所述数据持久层。

6.根据权利要求5所述的一种互联网监管领域的数据智能提取对接系统，其特征在于，所述数据请求模块包括请求分拣单元、请求参数处理单元、请求方式处理单元，其中：

所述请求分拣单元用于根据定时任务查找相对应的接口模板，并传送至所述请求参数处理单元；

所述请求参数处理单元用于解析接口模板的配置信息，并提取配置信息的特征值，随后传送至所述请求方式处理单元。

所述请求方式处理单元用于通过配置信息的特征值获取第三方数据的请求方式。

7.根据权利要求6所述的一种互联网监管领域的数据智能提取对接系统，其特征在于，所述数据请求模块还包括数据接收测试单元；

所述数据接收测试单元获取部分第三方数据，对接口模板进行请求测试，以保证接口模板可以正常运行。

8.根据权利要求6所述的一种互联网监管领域的数据智能提取对接系统，其特征在于，所述数据解析模块包括数据解析分拣单元、数据解析单元、数据包装单元，其中：

所述解析分拣单元用于获取第三方数据，并根据数据请求模块输出的接口模板解析信息，对第三方数据分配相应的处理流程，并传送至所述数据解析单元；

所述数据解析单元用于根据处理流程处理第三方数据，并获取到与接口模板配置信息相对应的内容，随后传递至所述数据包装单元；

所述数据包装单元用于对解析得到的接口数据和解析接口数据过程中得到的非接口数据进行整合、处理和封装，随后导出至所述数据导出模块。

9.根据权利要求8所述的一种互联网监管领域的数据智能提取对接系统，其特征在于，所述数据导出模块包括数据导出分拣单元、数据导出单元，其中：

所述数据导出分拣单元用于对所述数据包装单元输出的封装数据进行分配，并启动与数据相对应的导出流程；

所述数据导出单元用于根据导出流程导出对应数据，并将导出数据解封，随后导入对应的数据存储层。

10.根据权利要求1所述的一种互联网监管领域的数据智能提取对接系统，其特征在于，所述数据持久层的数据结构为关系型数据库或非关系型数据库。