[发明专利]一种数据采集方法及装置

说明书

技术领域

本发明涉及数据通信领域，尤其涉及一种数据采集方法及装置。

背景技术

性能管理是电信网管系统的重要组成部分。性能管理的基础是性能数据，用户通过对性能数据的统计分析，可以了解网络的整体运行状况，为运营商的管理、决策提供依据。现有对性能数据采集的方法是周期性的产生主采集任务来采集系统的性能数据。但是由于网络原因，或者网元设备故障，经常会出现性能数据延迟上报的情况。当性能数据出现延迟上报，会出现性能管理的数据采集任务采集不到当前时间粒度的数据，导致性能数据出现了时间粒度上的不完整，而影响了对性能数据的统计分析。

发明内容

本发明要解决的主要技术问题是，提供一种数据采集方法及装置能够保证数据在时间粒度上的完整性。

为解决上述技术问题，本发明提供一种数据采集方法，包括以下步骤：

建立数据采集任务队列；

生成数据主采集任务并将所述主采集任务加入所述数据采集任务队列；

从所述数据采集任务队列中获取并执行主采集任务，所述主采集任务执行失败后，生成与该主采集任务对应的补采集任务并加入所述数据采集任务队列；

从所述数据采集任务队列中获取并执行所述补采集任务。

进一步地，所述主采集任务失败后，生成与该主采集任务对应的补采集任务并加入所述数据采集任务队列包括：

收到所述主采集任务失败通知后，间隔一段时间后自动生成所述补采集任务并加入所述数据采集任务队列；

或者收到所述主采集任务失败通知后，立即自动生成所述补采集任务并加入所述数据采集任务队列。

进一步地，所述方法还包括：

当执行所述补采集任务失败时，判断执行所述补采集任务的次数是否小于预设次数，若是，则重新生成执行失败的补采集任务并加入所述数据采集任务队列；若否，则判定执行自动生成的补采集任务失败。

进一步地，所述生成数据主采集任务并将所述主采集任务加入所述数据采集任务队列包括：

每隔一段时间生成数据主采集任务并将生成的主采集任务加入所述数据采集任务队列；生成数据主采集任务的时间间隔值与生成补采集任务的时间间隔值不相同。

进一步地，当判定执行自动生成的补采集任务失败后，还包括：

接收手工补采指令；

根据所述手工补采指令生成手工补采集任务并加入到所述数据采集任务队列中；

从所述数据采集任务队列中获取并执行所述手工补采集任务。

进一步地，所述建立数据采集任务队列包括：

建立数据采集任务队列，在所述采集任务队列中设置采集任务优先级，采集任务的优先级从高到低的顺序为：主采集任务、自动生成的补采集任务、手动补采集任务；

或者

所述建立数据采集任务队列包括：建立数据采集任务队列，根据采集任务的生成时间顺序排列所述数据采集任务队列中的采集任务。

进一步地，当主采集任务失败时，生成与该主采集任务对应的补采集任务并加入所述数据采集任务队列包括：

收到所述主采集任务失败通知后接收手工补采指令；

根据所述手工补采指令生成手工补采集任务并加入到所述数据采集任务队列中。

同样为了解决上述的技术问题，本发明还提供了一种数据采集装置，包括：数据采集主控模块、主采集任务产生模块、补采集任务产生模块以及采集任务执行模块；

所述数据采集主控模块用于建立一个数据采集任务队列；

所述主采集任务产生模块用于生成数据主采集任务并将所述主采集任务加入所述数据采集任务队列；

所述采集任务执行模块用于从所述数据采集任务队列中获取并执行采集任务；

所述补采集任务产生模块用于当所述主采集任务执行失败时，生成与该主采集任务对应的补采集任务并加入所述数据采集任务队列。

进一步地，所述补采集任务产生模块包括自动补采集任务产生子模块；所述自动补采集任务产生子模块用于收到所述主采集任务失败通知后，间隔一段时间后自动生成所述补采集任务并加入所述数据采集任务队列；

或者用于收到所述主采集任务失败通知后，立即自动生成所述补采集任务并加入所述数据采集任务队列。