[发明专利]一种故障处理方法及装置

说明书

本申请实施例提供了一种故障处理方法及装置，涉及存储技术领域，用以解决主OSD上线但数据还未恢复时，IO请求的响应速度较慢的问题。本申请实施例的方案包括：若检测到目标PG对应的主OSD下线，则将目标PG对应的一个从OSD变更为临时主角色，并将目标PG的PG日志的最大条目数增加预设数量，若在预设时长内主OSD未上线，则将一个从OSD变更为主角色；在超过预设时长，且目标PG的PG日志达到最大条目数之前，若主OSD上线，则将主OSD设置为从角色，并将主OSD下线期间产生的与目标PG相关的数据复制到主OSD，在完成数据复制后，将主OSD由从角色变更为主角色，将一个从OSD由主角色变更为从角色。

技术领域

本申请涉及存储技术领域，特别是涉及一种故障处理方法及装置。

背景技术

Ceph是一种软件定义的分布式存储系统。它通过整合通用服务器的硬件存储资源，为客户提供统一的、分布式的存储服务。Ceph可以将数据域划分为多个归置组(Placement Group，PG)，每个PG可映射到至少两个对象存储设备(Object StorageDevice，OSD)上，其中一个OSD为主(primary)OSD，用于存储PG的主副本，其余OSD为从(replicate)OSD，用于存储PG的从副本。

若某一PG对应的主OSD下线，该PG将变更为降级状态，并增加可保存的PG日志(Log)的最大条目数，且该PG对应的其中一个从OSD升级为临时主角色，在主OSD下线期间，PG将通过该从OSD存储的从副本处理输入/输出(Input/Output，IO)IO请求，并生成PG日志。

在主OSD再次上线时，PG可获取针对从OSD存储的从副本生成的PG日志，将获取到的PG日志与主OSD下线前针对主副本生成的PG日志进行合并，并建立missing列表来标记主OSD下线期间从OSD产生的数据。然后从OSD恢复为从角色，PG通过主OSD存储的主副本处理IO请求，且主OSD在从OSD中获取missing列表标记的数据，以进行数据恢复。

然而，若IO请求所请求的数据为处于missing列表中的数据，而主OSD还未恢复IO请求所请求的数据，将进行数据恢复的“插队”操作，即先恢复IO请求所请求的数据。在这种情况下，由于不能直接从主OSD中获取数据，而是需要通过拉取从OSD中的数据，将这部分数据恢复至主OSD后，才能继续处理IO请求，这个过程受磁盘转速、网络带宽、服务器性能等影响，将会产生较长的时延，导致IO请求的响应速度较慢。

发明内容

有鉴于此，本申请实施例提供一种故障处理的方法及装置，以解决主OSD上线但数据还未恢复时，IO请求的响应速度较慢。具体技术方案如下：

第一方面，本申请实施例提供一种故障处理方法，包括：

若检测到目标归置组PG对应的主对象存储设备OSD下线，则将所述目标PG对应的一个从OSD变更为临时主角色，并将所述目标PG的PG日志的最大条目数增加预设数量；

若在预设时长内所述主OSD未上线，则将所述一个从OSD变更为主角色；

在超过所述预设时长，且所述目标PG的PG日志达到最大条目数之前，若所述主OSD上线，则将所述主OSD设置为从角色，并将所述主OSD下线期间产生的与所述目标PG相关的数据复制到所述主OSD；

在完成数据复制后，将所述主OSD由从角色变更为主角色，将所述一个从OSD由主角色变更为从角色。

在一种可能的实现方式中，所述方法还包括：

在超过所述预设时长，且所述PG日志达到最大条目数之后，若检测到所述主OSD上线，则将所述主OSD设置为从角色；

对所述主OSD进行全量复制，将所述一个从OSD中与所述目标PG相关的数据全部复制到所述主OSD；