[发明专利]一种数据采集程序的管控方法、系统、设备及存储介质

权利要求书

1.一种数据采集程序的管控方法，其特征在于，包括：

根据数据采集任务配置表中的调度信息，定时调度数据采集程序以执行对应数据采集任务，所述数据采集任务配置表包括各监控指标对应的指标阈值；

对所述数据采集程序采集到的数据调用相应的监控逻辑进行监控，所述监控逻辑每次被调用时用于根据当前采集到的数据计算各所述监控指标的值，并将所述监控指标的值与对应的指标阈值进行比对，得到比对结果；

对各所述比对结果进行分析，在达到预警条件时执行相应的预警操作。

2.根据权利要求1所述的数据采集程序的管控方法，其特征在于，所述各监控指标包括空值数、空值率、最大超出重试次数、采集异常数量和/或采集成功数量。

3.根据权利要求2所述的数据采集程序的管控方法，其特征在于，所述对各所述比对结果进行分析，包括：

若任意一个监控指标与对应的指标阈值的比对结果不满足对应预置比对条件，判定达到预警条件。

4.根据权利要求1所述的数据采集程序的管控方法，其特征在于，所述执行相应的预警操作，包括：

通过界面显示用于提示对应数据采集任务失败的预警信息，和/或，向预设邮件接收方发送对应的预警邮件。

5.根据权利要求1所述的数据采集程序的管控方法，其特征在于，所述方法还包括：

接收数据显示指令；

根据所述数据显示指令，对数据采集程序的对应运行状态数据进行可视化显示；所述运行状态数据包括数据采集任务的标识、数据类型、名称、运行状态、运行开始时间、运行结束时间、各监控指标的值和/或运行日志。

6.根据权利要求1所述的数据采集程序的管控方法，其特征在于，所述方法还包括：

对数据采集任务的调度信息进行定时检测；

在所述数据采集任务的调度信息发生更改时，对应更新所述数据采集任务配置表中的调度信息。

7.一种数据采集程序的管控设备，其特征在于，包括：

存储器，用于存储指令；其中，所述指令为可实现如权利要求1-6任意一项所述的数据采集程序的管控方法的指令；

处理器，用于执行所述存储器中的指令。

8.一种计算机可读存储介质，其特征在于，所述计算机可读存储介质上存储有计算机程序，所述计算机程序被处理器执行时实现如权利要求1-6任意一项所述的数据采集程序的管控方法。

9.一种数据采集程序的管控系统，其特征在于，包括：

任务调度模块，用于根据数据采集任务配置表中的调度信息，定时调度数据采集程序以执行对应数据采集任务，所述数据采集任务配置表包括各监控指标对应的指标阈值；

数据监控模块，用于对所述数据采集程序采集到的数据调用相应的监控逻辑进行监控，所述监控逻辑每次被调用时用于根据当前采集到的数据计算各所述监控指标的值，并将所述监控指标的值与对应的指标阈值进行比对，得到比对结果；

预警通知模块，用于对各所述比对结果进行分析，在达到预警条件时执行相应的预警操作。

10.根据权利要求9所述的数据采集程序的管控系统，其特征在于，所述各监控指标包括空值数、空值率、最大超出重试次数、采集异常数量和/或采集成功数量。

11.根据权利要求10所述的数据采集程序的管控系统，其特征在于，所述预警通知模块对各所述比对结果进行分析时，具体用于：

若任意一个监控指标与对应的指标阈值的比对结果不满足对应预置比对条件，判定达到预警条件。

12.根据权利要求9所述的数据采集程序的管控系统，其特征在于，所述预警通知模块执行相应的预警操作时，具体用于：

通过界面显示用于提示对应数据采集任务失败的预警信息，和/或，向预设邮件接收方发送对应的预警邮件。