[发明专利]一种数据采集方法及装置

权利要求书

1.一种数据采集方法，其特征在于，包括以下步骤：

建立数据采集任务队列；

生成数据主采集任务并将所述主采集任务加入所述数据采集任务队列；

从所述数据采集任务队列中获取并执行主采集任务，所述主采集任务执行失败后，生成与该主采集任务对应的补采集任务并加入所述数据采集任务队列；

从所述数据采集任务队列中获取并执行所述补采集任务。

2.如权利要求1所述的数据采集方法，其特征在于，所述主采集任务失败后，生成与该主采集任务对应的补采集任务并加入所述数据采集任务队列包括：

收到所述主采集任务失败通知后，间隔一段时间后自动生成所述补采集任务并加入所述数据采集任务队列；

或者收到所述主采集任务失败通知后，立即自动生成所述补采集任务并加入所述数据采集任务队列。

3.如权利要求2所述的数据采集方法，其特征在于，所述方法还包括：

当执行所述补采集任务失败时，判断执行所述补采集任务的次数是否小于预设次数，若是，则重新生成执行失败的补采集任务并加入所述数据采集任务队列；若否，则判定执行自动生成的补采集任务失败。

4.如权利要求3所述的数据采集方法，其特征在于，所述生成数据主采集任务并将所述主采集任务加入所述数据采集任务队列包括：

每隔一段时间生成数据主采集任务并将生成的主采集任务加入所述数据采集任务队列；生成数据主采集任务的时间间隔值与生成补采集任务的时间间隔值不相同。

5.如权利要求4所述的数据采集方法，其特征在于，当判定执行自动生成的补采集任务失败后，还包括：

接收用户输入的手工补采指令；

根据所述手工补采指令生成手工补采集任务并加入到所述数据采集任务队列中；

从所述数据采集任务队列中获取并执行所述手工补采集任务。

6.如权利要求5所述的数据采集方法，其特征在于，所述建立数据采集任务队列包括：

建立数据采集任务队列，在所述采集任务队列中设置采集任务优先级，采集任务的优先级从高到低的顺序为：主采集任务、自动生成的补采集任务、手动补采集任务；

或者

所述建立数据采集任务队列包括：建立数据采集任务队列，根据采集任务的生成时间顺序排列所述数据采集任务队列中的采集任务。

7.如权利要求1所述的数据采集方法，其特征在于，所述主采集任务失败后，生成与该主采集任务对应的补采集任务并加入所述数据采集任务队列包括：

收到所述主采集任务失败通知后接收用户输入的手工补采指令；

根据所述手工补采指令生成手工补采集任务并加入到所述数据采集任务队列中。

8.一种数据采集装置，其特征在于，包括：数据采集主控模块、主采集任务产生模块、补采集任务产生模块以及采集任务执行模块；

所述数据采集主控模块用于建立一个数据采集任务队列；

所述主采集任务产生模块用于生成数据主采集任务并将所述主采集任务加入所述数据采集任务队列；

所述采集任务执行模块用于从所述数据采集任务队列中获取并执行采集任务；

所述补采集任务产生模块用于所述主采集任务执行失败后，生成与该主采集任务对应的补采集任务并加入所述数据采集任务队列。

9.如权利要求8所述的数据采集装置，其特征在于，所述补采集任务产生模块包括自动补采集任务产生子模块；所述自动补采集任务产生子模块用于收到所述主采集任务失败通知后，间隔一段时间后自动生成所述补采集任务并加入所述数据采集任务队列；

或者用于收到所述主采集任务失败通知后，立即自动生成所述补采集任务并加入所述数据采集任务队列。

10.如权利要求9所述的数据采集装置，其特征在于，还包括：执行次数判断模块；所述执行次数判断模块用于当执行所述补采集任务失败时，判断执行所述补采集任务的次数是否小于预设次数，若是，则通知所述自动补采集任务产生子模块重新生成执行失败的补采集任务并加入所述数据采集任务队列；若否，则判定执行自动生成的补采集任务失败。