[发明专利]一种集群性能的评估方法和装置

说明书

本发明公开了一种集群性能的评估方法和装置，涉及计算机技术领域。该方法的一具体实施方式包括：获取集群的服务信息和集群中各个节点的物理资源使用信息；基于所述集群的服务信息、集群中各个节点的物理资源使用信息和预设的评价规则，实时计算得到集群的评价指标信息；所述评价规则包括：集群的评价指标以及评价指标对应的权值；将集群的各个评价指标信息进行加权求和，确定所述集群的性能健康度。该实施方式能够通过分析收集的集群的服务信息和节点的物理资源使用信息，可以确定集群的性能健康度，从而有效地评估当前集群的状态，解决了现有技术中缺少有效的评价方式评估当前集群的状态或评分的问题。

技术领域

本发明涉及计算机技术领域，尤其涉及一种集群性能的评估方法和装置。

背景技术

随着业务量和数据量的增长，大数据处理集群规模也随着随之变的越来越大。如何评价一个超大规模集群的性能变的越来越复杂，他的性能受很多因素影响，如：网络，磁盘IO，CPU，业务量，热点数据、热节点等等。在现有技术中，为了能够快速定位和排查集群性能仅仅监控一些常规指标。

在实现本发明过程中，发明人发现现有技术中至少存在如下问题：

1.缺少有效的评价方式评估当前集群的状态或评分。

2.利用现有方式在超大规模集群中，无法有效分析每个节点对于集群效率所占的成份，计算节点在整个集群中提供了多少计算能力，难以定位差异性节点。

3.缺少节点服务成份分析，利用现有方式无法有效分析主节点。

4.指标分散无法有效评估集群当前状态，相关人员需要通过查看多个视图，分析多个指标，并根据历史信息评价集群的当前状态，并且不同的人评价指标不同得到的结论也不同，容易造成集群无法有效规避一些问题。

5.缺少自动化分析方式，目前还是人为驱动的方式去分析集群状态，在这种方式下存在信息滞后的问题。

发明内容

有鉴于此，本发明实施例提供一种集群性能的评估方法和装置，能够通过分析收集的集群的服务信息和节点的物理资源使用信息，可以确定集群的性能健康度，从而有效地评估当前集群的状态，解决了现有技术中缺少有效的评价方式评估当前集群的状态或评分的问题。

为实现上述目的，根据本发明实施例的一个方面，提供了一种集群性能的评估方法，包括：获取集群的服务信息和集群中各个节点的物理资源使用信息；基于所述集群的服务信息、集群中各个节点的物理资源使用信息和预设的评价规则，实时计算得到集群的评价指标信息；所述评价规则包括：集群的评价指标以及评价指标对应的权值；将集群的各个评价指标信息进行加权求和，确定所述集群的性能健康度。

可选地，所述集群的性能健康度采用以下方式确定：

其中，H表示集群的性能健康度，f(i)表示集群的第i个评价指标信息，w表示评价指标对应的权值，n表示集群的评价指标的数量。

可选地，所述方法还包括：根据节点的物理资源使用信息和集群的服务信息，确定节点的主成分占比；若节点的主成分占比，不在预设范围内，则确定该节点为差异性节点。

可选地，所述方法还包括：根据节点的主成分占比，计算集群中各节点的主成分占比的均方差；若所述均方差超过设定阈值，则所述集群为异常集群。

可选地，确定该节点为差异性节点之后，所述方法还包括：根据所述差异性节点及其主成分占比，确定该差异性节点的问题；根据所述问题，从预先设置的规则库中获取与所述问题对应的答案或优化方式。