[发明专利]监控数据收集方法、装置及设备

说明书

本发明实施例提供的一种监控数据收集方法、装置及设备。其中，一种监控数据收集方法，应用于日志数据收集器，在检测到分布式系统的监控日志存在更新时，获取所述分布式系统的中心节点所更新的监控日志，作为待收集的监控日志；其中，所述中心节点所更新的监控日志为所述中心节点对所述分布式系统的监控数据进行记录得到的日志；将所述待收集的监控日志，发送给监控数据存储装置进行存储。本方案可以减少监控数据的收集出现异常时，所导致的中心节点性能下降的问题。

技术领域

本发明涉及监控数据收集技术领域，特别是涉及一种监控数据收集方法、装置及设备。

背景技术

为了保证在分布式系统出现异常时，可以根据相关的运行数据分析以及处理异常，需要对分布式系统的运行情况进行监控，获得监控数据，并收集得到的监控数据。相关技术中，可以封装分布式发布订阅消息工具的类库，并保存在分布式系统的中心节点。当需要收集监控数据时，中心节点可以直接调用类库中的发布函数，将监控数据发布到分布式发布订阅消息工具中存储。

但是，上述收集方式中，中心节点调用分布式发布订阅消息工具的发布函数，与分布式发布订阅消息工具存在高度耦合。因此，当分布式发布订阅消息工具出现异常时，中心节点调用的发布函数会出现僵死的异常，进而导致调用该发布函数的中心节点出现僵死线程。特别是在中心节点高并发收集监控数据，大量调用发布函数时，中心节点会出现大量僵死线程，占用中心节点的处理资源，导致中心节点处理其他业务的性能下降甚至异常。

发明内容

本发明实施例的目的在于提供一种监控数据收集方法、装置及设备，以实现减少分布式系统中，数据收集异常导致的中心节点性能下降的效果。具体技术方案如下：

第一方面，本发明实施例提供了一种监控数据收集方法，

应用于日志数据收集器，该方法包括：

在检测到分布式系统的监控日志存在更新时，获取所述分布式系统的中心节点所更新的监控日志，作为待收集的监控日志；其中，所述中心节点所更新的监控日志为所述中心节点对所述分布式系统的监控数据进行记录得到的日志；

将所述待收集的监控日志，发送给监控数据存储装置进行存储。

可选的，所述将所述待收集的监控日志，发送给监控数据存储装置进行存储，包括：

对超文本传输协议HTTP接口进行调用，并检测对所述HTTP接口的调用是否异常；

如果异常，停止对所述待收集的监控日志的发送，并在检测到所述HTTP接口能够被调用时，按照从所停止发送的待收集的监控日志开始的顺序，调用超文本传输协议HTTP接口将已获取的待收集的监控日志，发送给监控数据存储装置进行存储，否则，利用所调用的HTTP接口将待收集的监控日志，发送给监控数据存储装置进行存储。

可选的，在所述将所述待收集的监控日志，发送给监控数据存储装置进行存储之前，所述方法还包括：

判断所获取的待收集的监控日志的个数是否为指定数量；

如果不为指定数量，返回执行所述在检测到所述分布式系统的监控日志存在更新时，获取所更新的监控日志，作为待收集的监控日志，否则，所述将所述待收集的监控日志，发送给监控数据存储装置进行存储，包括：

将所获取的多个待收集的监控日志，发送给所述监控数据存储装置进行存储。

可选的，所述日志数据收集器，包括：

具有插件式架构的日志数据收集器。

可选的，所述监控日志，包括：

所述分布式系统的中心节点按照预设的网络脚本语言对象简谱JSON格式，记录并保存所述分布式系统的监控数据得到的日志。