[发明专利]一种自动监控数据采集进度的方法

权利要求书

1.一种自动监控数据采集进度的方法，其特征在于,该方法的实现过程包括：

步骤1、在分析库创建监控表，采集模块每完成一次采集工作都会生成一条采集数据并自动写入监控表；

步骤2、基于监控表的采集数据，在分析库创建配置表；

步骤3、在配置表中，针对监控表的每一条采集数据，配置待监控采集数据的日期差上限Δ，其中日期差上限Δ根据作业系统或作业表设定不同的工作模式；

步骤4、启动监控模块，监控模块自动获取监控表和配置表的数据，通过计算每条采集数据的时长，与对应的日期差上限Δ进行比较，得到采集进度的反馈结果。

2.根据权利要求1所述的一种自动监控数据采集进度的方法，其特征在于，所述监控表的每条采集数据分别包括字段名、数据类型和注释三部分，其中，所述字段名包括table_name、prod_date、fin_date，所述数据类型包括字符串型和日期型，所述注释用于根据字段名和数据类型进行解释；每条采集数据的时长就等于fin_date和prod_date所对应日期的差值。

3.根据权利要求2所述的一种自动监控数据采集进度的方法，其特征在于，所述配置表的每条采集数据分别包括字段名、数据类型和注释三部分，其中，所述字段名包括table_name、delta，所述数据类型包括字符串型和数值型，所述注释用于根据字段名和数据类型进行解释。

4.根据权利要求2所述的一种自动监控数据采集进度的方法，其特征在于，所述日期差上限Δ根据作业系统或作业表设定T+0模式，

T+0模式下，作业库当天产生的数据必须当天采集进入到分析库，此时Δ设置为0，

T+0模式下，采集数据的时长与其对应的日期差上限Δ进行比较时，若fin_date和prod_date所对应日期的差值等于0，则表示采集正常，反馈正常信息，若fin_date和prod_date所对应日期的差值大于0，则表示采集异常，出现延迟，发出数据采集延迟报警并反馈具体的延迟时间。

5.根据权利要求4所述的一种自动监控数据采集进度的方法，其特征在于，针对数据需求紧急且重要的情况，将日期差上限Δ设定为T+0模式。

6.根据权利要求2所述的一种自动监控数据采集进度的方法，其特征在于，所述日期差上限Δ根据作业系统或作业表设定T+δ模式，其中，0δ∞，

T+δ模式下，作业库当天产生的数据无需当天采集进入分析库，只需要在规定时间δ天内完成即可，此时Δ设置为δ；

T+δ模式下，采集数据的时长与其对应的日期差上限Δ进行比较时，若fin_date和prod_date所对应日期的差值小于等于δ，则表示采集正常，反馈正常信息，若fin_date和prod_date所对应日期的差值大于δ，则表示采集异常，出现延迟，发出数据采集延迟报警并反馈具体的延迟时间。

7.根据权利要求6所述的一种自动监控数据采集进度的方法，其特征在于，针对时间要求不紧或是资源紧张时优先级较低的情况，将日期差上限Δ设定为T+δ模式，且δ越大，则优先级越低，重要程度也越低。

8.根据权利要求2所述的一种自动监控数据采集进度的方法，其特征在于，所述日期差上限Δ根据作业系统或作业表设定T+(-1)模式，

T+(-1)模式即不监控模式，表示该系统或作业表无需监控数据采集完成进度情况，执行步骤4时，直接跳过监控，反馈无需监控信息。