[发明专利]节点异常处理方法、电子设备、系统及介质

说明书

本发明提供了一种节点异常处理方法、电子设备、系统及介质，所述方法包括：定时获取每个节点的心跳信息，以及获取到每个心跳信息时的时间戳；根据每个心跳信息及对应的时间戳，确定异常节点；确定所述异常节点的异常类型；根据所述异常类型处理所述异常节点。本发明实现了对分布式云存储中异常节点的自动监控及处理。

技术领域

本发明涉及互联网技术领域，尤其涉及节点异常处理方法、电子设备、系统及介质。

背景技术

目前，分布式云存储服务越来越流行，但是分布式的特点是节点多、分布较离散，而且为了节约成本，使用的存储设备的配置也不如服务器稳定，比较容易出现各种问题，比如：磁盘只读、掉盘、IO(Input/Output，输入/输出)错误或者网络异常等。但是，由于提供的是云存储服务，对节点的稳定性和可用性要求比较高。

传统的云存储大都是基于机房的存储，存储介质一般是高质量、高性能的服务器，有专门的机房管理人员进行维护，当运行于服务器的监控服务器监控到存储介质异常，或者探测服务器发现存储服务器的网络出现异常时，将自动触发告警程序，即第一时间以短信或电话通知相关人员进行处理，不仅主要依靠人为处理，并且在处理过程中，有可能需要断网或关机，此时，如果数据没有备份，还会影响服务或导致数据丢失。

发明内容

本发明的主要目的在于提供节点异常处理方法、电子设备、系统及介质，旨在自动监控并处理异常节点。

为实现上述目的，本发明提供一种节点异常处理方法，所述方法包括：

定时获取每个节点的心跳信息，以及获取到每个心跳信息时的时间戳；

根据每个心跳信息及对应的时间戳，确定异常节点；

确定所述异常节点的异常类型；

根据所述异常类型处理所述异常节点。

优选地，所述根据每个心跳信息及对应的时间戳，确定异常节点包括：

根据每个心跳信息对应的时间戳，确定每个节点的当前心跳信息以及上一心跳信息，对比每个节点的当前心跳信息以及上一心跳信息，得到对比结果，获取所述对比结果中存在字段丢失及/或硬盘丢失的节点作为所述异常节点；及/或

获取当前心跳信息中CPU负载值大于或者等于第一阈值及/或IO负载值大于或者等于第二阈值及/或内存使用率大于或者等于第三阈值的节点作为所述异常节点；及/或

根据每个心跳信息对应的时间戳，获取一个周期内没有更新心跳信息的节点作为所述异常节点。

优选地，所述确定所述异常节点的异常类型包括：

当所述异常节点的当前心跳信息中存在字段丢失及/或硬盘丢失时，确定所述异常节点的异常类型为存储异常；或者

当所述异常节点的当前心跳信息中存在CPU负载值大于或者等于第一阈值及/或IO负载值大于或者等于第二阈值及/或内存使用率大于或者等于第三阈值时，确定所述异常节点的异常类型为负载异常；或者

当所述异常节点在一个周期内没有更新心跳信息时，确定所述异常节点的异常类型为网络异常。

优选地，所述根据所述异常类型处理所述异常节点包括：

当所述异常节点的异常类型为存储异常时，将所述异常节点对应的存储介质的权重置0；或者

当所述异常节点的异常类型为负载异常时，对所述异常节点进行降权；或者

当所述异常节点的异常类型为网络异常时，将所述异常节点的权重置0。

优选地，所述根据所述异常类型处理所述异常节点还包括：

在确定所述异常节点后，获取可用节点；