[发明专利]一种副本数据恢复方法、系统、电子设备及存储介质

说明书

本申请公开了一种副本数据恢复方法，所述副本数据恢复方法包括将bluestore设置为分布式存储集群的底层数据管理组件；当bluestore执行wal写操作时，向wal数据中添加元数据信息；当bluestore执行大写操作时，生成对象数据的元数据信息；将添加有元数据信息的wal数据和对象数据的元数据信息设置为节点log；在分布式存储集群集体掉电并重新上电后，根据所述节点log恢复所述分布式存储集群中所有节点的副本数据。本申请能够降低副本数据恢复过程中双写问题出现的概率，提高分布式存储集群的写性能。本申请还公开了一种副本数据恢复系统、一种存储介质及一种电子设备，具有以上有益效果。

技术领域

本申请涉及数据存储技术领域，特别涉及一种副本数据恢复方法、系统、一种电子设备及一种存储介质。

背景技术

分布式存储集群可以将多台存储设备中的存储空间聚合成一个能够给应用服务器提供统一访问接口和管理界面的存储池，进而充分发挥存储设备的性能和磁盘利用率。

分布式存储集群中的数据可以以副本组的形式进行存储，分布式存储节点中的多个节点中包括同一数据的副本，以便提高分布式存储集群的可靠性。在当分布式存储集群发生全局掉电后，相关技术通常使用传统文件系统自身的journal(etx4文件系统的一种日志模式)机制实现数据完整性检测和数据恢复，但是journal机制在写数据时会引起严重的双写问题，导致写性能降低。

因此，如何降低副本数据恢复过程中双写问题出现的概率，提高分布式存储集群的写性能是本领域技术人员目前需要解决的技术问题。

发明内容

本申请的目的是提供一种副本数据恢复方法、系统、一种电子设备及一种存储介质，能够降低副本数据恢复过程中双写问题出现的概率，提高分布式存储集群的写性能。

为解决上述技术问题，本申请提供一种副本数据恢复方法，该副本数据恢复方法包括：

将bluestore设置为分布式存储集群的底层数据管理组件；

当所述bluestore执行wal写操作时，向wal数据中添加元数据信息；

当所述bluestore执行大写操作时，生成对象数据的元数据信息；

将添加有所述元数据信息的wal数据和所述对象数据的元数据信息设置为节点log；

在所述分布式存储集群集体掉电并重新上电后，根据所述节点log恢复所述分布式存储集群中所有节点的副本数据。

可选的，根据所述节点log恢复所述分布式存储集群中所有节点的副本数据，包括：

确定仲裁节点，并利用所述仲裁节点确定所述分布式存储集群中的已上线节点；

利用所述仲裁节点向所述已上线节点发送节点log收集命令，以便所述已上线节点将所述节点log中的元数据信息传输至所述仲裁节点；

利用所述仲裁节点确定第一类节点和第二类节点；其中，所述第一类节点为存储有所述节点log的节点，第二类节点为未存储所述节点log的节点；

向所述第二类节点发送数据拉取指令，以便所述第二类节点从所述第一类节点中拉取数据并恢复副本数据。

可选的，在利用所述仲裁节点向已上线节点发送节点log收集命令之前，还包括：

判断所述已上线节点的数量是否大于预设数量；

判断所述仲裁节点的等待时间是否大于预设时间；其中，所述等待时间为所述仲裁节点等待所述分布式存储集群的节点发送上线通知信息的时间；

若所述节点上线数量大于预设数量且所述仲裁节点的等待时间大于预设时间，则执行所述利用所述仲裁节点向已上线的节点发送节点log收集命令的操作。