[发明专利]一种基于云计算的分布式数据采集系统及方法

权利要求书

1.一种基于云计算的分布式数据采集系统，包括：由至少一个服务器构成的云服务器、用于管理所述云服务器的至少一个虚拟化管理软件(VMS)，至少一个用于信息采集的Discover节点，一个Collect节点和一个云计算平台，其特征在于；

所述云服务器用于在云计算环境中提供IT基础设施的被虚拟化后的服务器，可以是单台服务器，也可以是一组集群服务器；

所述虚拟化管理软件至少管理一台云服务器，并连接到一个Discover节点，用于在虚拟化层进行资源调度管理，对下接管云服务器中的资源，向云服务器分发调度指令，并对云服务器进行监控；对上向所述Discover节点提供各类API接口，以便所述Discover节点通过虚拟化管理软件提供的API接口获取虚拟化管理软件中的信息；

所述Discover节点连接一个提供信息采集API接口的虚拟化管理软件，用于按周期调用虚拟化管理软件提供的API获取虚拟化管理软件中的信息，将采集到的信息汇报到所述云计算平台中；

所述Collect节点连接到至少一个Discover节点，用于设置采集任务及各采集任务的采集时钟周期，并将设置信息下发到Collect节点连接的所有Discover节点中；

所述云计算平台连接至少一个Discover节点和所述Collect节点，用于设置Collect节点的采集任务及采集周期，接收Discover节点采集到的信息，并对云环境中的资产、资源、模板进行管理，将云计算环境中的IT资源以服务的方式交付给用户使用，并且在此基础上实现监控及计费。

2.根据权利要求1所述的基于云计算的分布式数据采集系统，其特征在于所述虚拟化管理软件、所述Discover节点、所述Collect节点和所述云计算平台均可分别单独部署在PC、PC Server或虚拟机中。

3.根据权利要求1所述的基于云计算的分布式数据采集系统，其特征在于所述采集任务包括：资产信息采集、资源信息采集、模板信息采集、告警信息采集任务。

4.根据权利要求1所述的基于云计算的分布式数据采集系统，其特征在于不同的虚拟化管理软件分别连接到不同的Discover节点，一个Discover节点独立处理一个虚拟化管理软件中的信息采集，某Discvoer节点故障不影响其余Discover节点的运行。

5.根据权利要求1所述的基于云计算的分布式数据采集系统，其特征在于所述虚拟化管理软件支持VMware vSphere中的管理软件VMware vCenter和、IBMPower VM虚拟化技术中的管理软件SystcmDirector。

6.一种基于云计算的分布式数据采集方法，其应用于如权利要求1-5所述的基于云计算的分布式数据采集系统，其特征在于包括如下步骤：

S1：在云计算平台中设置采集任务及采集任务调度执行时间，调用Collect节点，设置包括采集任务及采集周期在内的采集策略，并保存到共享数据库中；

S2：Collect节点获取采集策略并创建线程池；

S3：Collect节点读取数据库中虚拟化管理软件信息；

S4：Collect节点读取数据库中的Discover节点信息；

S5：Collect节点将虚拟化管理软件信息与Discover节点信息匹配，并将匹配成功的信息对应到一个线程池并形成采集任务，采集任务按调度策略执行；

S6：Discover节点根据采集任务的类型分别调用虚拟化管理软件中提供的相关API接口，获取相关数据并将数据按要求写入共享数据库中，以供云计算平台使用。

7.根据权利要求6所述的基于云计算的分布式数据采集方法，其特征在于在步骤S6中，若数据获取失败，则Discover节点在任务时间期内，再次获取虚拟化管理软件标识并验证虚拟化管理软件的可连接性，若虚拟化管理软件可连接，则再次执行发现，若虚拟化管理软件连接失败，则抛出异常信息。

8.根据权利要求6所述的基于云计算的分布式数据采集方法，其特征在于在所述步骤S3，S4中，Collect节点每5分钟读取一次并缓存于内存中。

9.根据权利要求6所述的基于云计算的分布式数据采集方法，其特征在于在步骤S5中，每类采集任务形成线程池中的独立主线程，后续虚拟化管理软件中的每个对象相关的信息采集，将生成独立子线程执行，各线程分时执行；所述Collect节点在采集任务执行过程中监控各线程执行情况，对于执行超时的线程，将强行终止，以便后续线程继续执行。