[发明专利]一种确定资源调度组件的方法及其系统

说明书

本发明实施例公开了一种确定资源调度组件的方法，包括：获取到业务数据，并选取出处理所述业务数据的大数据组件；控制所述大数据组件基于至少两个资源调度组件中的每一所述资源调度组件对应的资源调度策略对所述业务数据进行处理；对基于每一所述资源调度组件的资源调度策略处理业务数据的大数据组件进行性能分析，得到所述大数据组件针对每一所述资源调度组件的性能检测结果；从所述至少两个资源调度组件中选取出性能检测结果满足预设规则的所述大数据组件对应的目标资源调度组件。本发明实施例还公开了一种确定资源调度组件的系统。

技术领域

本发明涉及资源调度技术，尤其涉及一种确定资源调度组件的方法及其系统。

背景技术

随着业务的飞速发展，集群规模的逐步扩大，各计算系统、存储系统，以及应用系统也随着业务的发展被创造出来。但是，集群规模扩大以后，却带来很多问题，如自动化部署，集群整体利用率偏低等被暴露出来，所以，亟需一套集群资源调度系统来解决这些问题。这里，所述集群资源调度系统对底层硬件进行了一层抽象，屏蔽了硬件的异构性，如对中央处理器(CPU)、存储器(MEMORY)、输入/输出(I/O)以及磁盘(DISK)等进行了资源抽象，对上层各种应用或服务提供资源统一管理和调度，从云计算的角度来划分，属于所述集群资源调度系统IAAS(Infrastructure-as-a-service)，总结起来，所述集群资源调度系统具有以下优点：第一，提升了资源利用率；不同业务都有自己的峰值业务需求，若每个业务集群单独部署，则每个业务间都是隔离封闭的，资源无共享，无法错峰交谷。而集群资源调度系统的引入可以很好的解决这一问题，如多业务之间可以做到资源共享，并有弹性管理机制，这样，根据不同业务的需要，灵活的进行调度，提高了资源利用率。第二，容灾；对于单个服务器来说，出故障的概率是比较小的，但对于大型分布式环境中，故障就要作为一种理所当然的常态了，而利用集群资源调度系统能够以较低的代价来解决机架，机柜，甚至是机房等故障的问题。

现有，在网页信息、网管(NMS)信令监测、商务智能(BI)等大数据应用中，针对不同系统产生的数据如何进行资源管理存在以下问题：大数据组件众多，一种集群资源调度系统无法满足所有的需求；而且，当存在多种集群资源调度系统时，由于大数据组件类型复杂，所以无法快速定位哪种集群资源调度系统符合要求。

发明内容

为解决现有存在的技术问题，本发明实施例提供了一种确定资源调度组件的方法及其系统，能至少解决现有技术中存在的上述问题。

本发明实施例的技术方案是这样实现的：

本发明实施例第一方面提供了一种确定资源调度组件的方法，所述方法包括：

获取到业务数据，并选取出处理所述业务数据的大数据组件；

控制所述大数据组件基于至少两个资源调度组件中的每一所述资源调度组件对应的资源调度策略对所述业务数据进行处理；

对基于每一所述资源调度组件的资源调度策略处理业务数据的大数据组件进行性能分析，得到所述大数据组件针对每一所述资源调度组件的性能检测结果；

从所述至少两个资源调度组件中选取出性能检测结果满足预设规则的所述大数据组件对应的目标资源调度组件。

上述方案中，所述资源调度组件对应至少两种资源调度策略；对应地，所述方法还包括：

控制所述大数据组件基于每一所述资源调度组件对应的每一所述资源调度策略对所述业务数据进行处理；

对基于每一所述资源调度组件对应的每一所述资源调度策略处理业务数据的大数据组件进行性能分析，得到所述大数据组件针对每一所述资源调度组件以及每一所述资源调度策略的性能检测结果；

从所述至少两个资源调度组件中选取出性能检测结果满足预设规则的所述大数据组件对应的目标资源调度组件和目标资源调度策略。