[发明专利]一种数据采集方法和系统

权利要求书

1.一种数据采集方法，其特征在于，该方法包括：

任务调度服务器从数据库中获取待处理的采集任务；

任务调度服务器对于获取的每个采集任务，按照预定策略从采集服务器集群中选择一个采集服务器，将该采集任务发送给该选择的采集服务器；

各采集服务器根据接收到的采集任务对指定终端设备进行数据采集，并将相应的数据采集结果返回保存至数据库中；

其中，所述采集服务器集群中包括多个采集服务器组，每个采集服务器组中包括多个采集服务器，同一采集服务器组中的采集服务器属于相同网段或者管理相同的业务；

则所述任务调度服务器对于获取的每个采集任务，按照预定策略从采集服务器集群中选择一个采集服务器包括：

任务调度服务器根据该采集任务中的采集对象所属的网段或业务类型从采集服务器集群中选择一个采集服务器组，根据负载均衡算法，从选择的采集服务器组中选择一个采集服务器。

2.如权利要求1所述的方法，其特征在于，该方法进一步包括：

对于所述采集服务器中的每个采集服务器，当该采集服务器启动时，该采集服务器将对应的采集服务地址注册到服务注册中心；

任务调度服务器从服务注册中心获取服务注册列表，该服务注册列表中包括：对应于各采集服务器组的服务注册组；每个服务注册组中包括：该服务注册组对应的采集服务器组中的采集服务器所注册的采集服务地址；

则所述从采集服务器集群中选择一个采集服务器组包括：任务调度服务器从服务注册列表中选择一个服务注册组；

所述从选择的采集服务器组中选择一个采集服务器包括：任务调度服务器从选择的服务注册组中选择一个采集服务地址；

所述将该采集任务发送给该选择的采集服务器包括：任务调度服务器根据所选择的采集服务地址将该采集任务发送给相应的采集服务器。

3.如权利要求2所述的方法，其特征在于，该方法进一步包括：

服务注册中心响应于所述采集服务器集群中的采集服务器的宕机，将该采集服务器对应的采集服务地址从服务注册列表中删除。

4.如权利要求1所述的方法，其特征在于，任务调度服务器中包括：任务接收器和多个任务调度器，每个任务调度器与一个本地缓存相对应，每个本地缓存与一个采集服务器组相对应；

所述任务调度服务器对于获取的每个采集任务，按照预定策略从采集服务器集群中选择一个采集服务器，将该采集任务发送给该选择的采集服务器包括：

任务调度服务器的任务接收器获取采集任务，按照预定策略从采集服务器集群中选择一个采集服务器组，将该获取的采集任务放入所选择的采集服务器组对应的本地缓存中；

该本地缓存对应的的任务调度器从所选择的采集服务器组中选择一个采集服务器，在所述放入所选择的采集服务器组对应的本地缓存中的采集任务的执行时刻，以线程池形式调用所选择的采集服务器，使得该选择的采集服务器接收采集任务。

5.如权利要求4所述的方法，其特征在于，该方法进一步包括：

任务接收器在将获取的采集任务放入所选择的采集服务器组对应的本地缓存中之后，还对该采集任务在数据库中的状态进行监听；

当监听到该采集任务在数据库中的状态发生更新时，将该采集任务在数据库中更新后的数据重新放入所述本地缓存以覆盖该采集任务的原数据。

6.如权利要求1所述的方法，其特征在于，所述各采集服务器根据接收到的采集任务对指定终端设备的进行数据采集包括：

采集服务器对于接收到的每个采集任务，将该采集任务放入任务队列中；

采集服务器从任务队列中依次获取采集任务，根据该采集任务进行相应的数据采集。

7.如权利要求1所述的方法，其特征在于，该方法进一步包括：

建立任务调度备份服务器，每隔预定时间间隔，任务调度备份服务器对任务调度服务器中的数据进行备份；

当任务调度服务器发生故障时，任务调度备份服务器接管任务调度服务器的全部调度工作。

8.一种数据采集系统，其特征在于，该系统包括：

任务调度服务器，适于从数据库中获取待处理的采集任务；对于获取的每个采集任务，按照预定策略从采集服务器集群中选择一个采集服务器，将该采集任务发送给该选择的采集服务器；

采集服务器，适于根据接收到的采集任务对指定终端设备进行数据采集，并将相应的数据采集结果返回保存至数据库中；

其中，所述采集服务器集群中包括多个采集服务器组，每个采集服务器组中包括多个采集服务器，同一采集服务器组中的采集服务器属于相同网段或者管理相同的业务；

任务调度服务器，适于根据获取的采集任务中的采集对象所属的网段或业务类型从采集服务器集群中选择一个采集服务器组，根据负载均衡算法，从选择的采集服务器组中选择一个采集服务器。