[发明专利]数据修复方法、分布式存储系统、电子设备及存储介质

说明书

本申请公开了一种数据修复方法、分布式存储系统、电子设备及存储介质。该方法包括：第一分片主副本所在的片服务器停机时，确定出用于存储第一分片待修复副本的修复服务器；从存储第一分片副本的服务器中，确定出当前主副本；将目标副本复制到修复服务器，以对待修复副本进行修复，目标副本为除待修复副本之外的第一分片副本；复制过程中，每当接收到对待修复副本的数据读取指令时，重定向至目标副本所在的片服务器读取数据；复制过程中，每当接收到对第一分片的数据写入指令时，将待写入的数据写入第一分片当前主副本所在片服务器中的临时文件，并将临时文件同步至第一分片的每个从副本所在的片服务器。该方法可实现分片修复过程中的数据读写。

技术领域

本申请涉及大数据技术领域，具体涉及一种数据修复方法、分布式存储系统、电子设备及计算机可读存储介质。

背景技术

随着大数据技术的不断发展，分布式存储系统的应用也越来越广泛，分布式存储系统可以为大数据的分析、处理带来极大的便利。

其中，Kudu系统是一种可运行在hadoop平台的分布式存储系统，具有高可用性。Kudu系统中的一个数据表(table)由多个分片(tablet)组成，每个分片在多个片服务器中均有副本，其中一个是主副本，主副本可读数据也可写数据，其他则是从副本，从副本只可读数据。读取分片数据的多个请求，会被分配到不同的副本进行数据读取，以提高读取效率。然而，当一个分片的主副本所在的片服务器发生停机时，由于缺失主副本而无法写入数据，导致该分片及该分片所属的数据表均变成了不可用的状态。

在相关技术中，为修复该分片，可以随机选取该分片的一个从副本，将选取的从副本复制到另一个正常可用、且没有该分片副本的片服务器中，得到一个新的从副本。复制完成后，再从该分片当前的所有副本中选举出主副本，即完成了该分片的修复。

但是，在上述技术中，由于分片副本的数据量通常很大，导致分片副本的复制过程非常耗时，而在复制过程中，分片无法进行数据读写。

发明内容

本申请提供了一种数据修复方法、分布式存储系统、电子设备及计算机可读存储介质，能够使分片在修复过程中实现数据读写。具体方式如下。

第一方面，本申请提供了一种数据修复方法，应用于分布式存储系统，所述分布式存储系统包括多个片服务器，所述系统中的每个数据表包括多个分片，每个所述分片具有多个副本，所述分片的多个副本分别存储在不同的所述片服务器，所述分片的多个副本包括一个主副本和至少一个从副本，所述方法包括：

当第一分片的主副本所在的片服务器停机时，从未存储有所述第一分片的副本的片服务器中，确定出用于存储所述第一分片的待修复副本的修复服务器；

从存储所述第一分片的从副本的片服务器和存储所述待修复副本的修复服务器中，确定出存储所述第一分片当前的主副本的片服务器；

将目标副本复制到所述修复服务器，以对所述待修复副本进行修复；所述目标副本为除所述待修复副本之外的所述第一分片的副本；

在复制所述目标副本的过程中，每当接收到对所述待修复副本的数据读取指令时，重定向至所述目标副本所在的片服务器读取数据；

在复制所述目标副本的过程中，每当接收到对所述第一分片的数据写入指令时，将待写入的数据写入所述第一分片当前的主副本所在的片服务器中的临时文件，并将所述临时文件同步至所述第一分片的每个从副本所在的片服务器。

第二方面，本申请实施例还提供了一种分布式存储系统，所述分布式存储系统包括多个片服务器，所述分布式存储系统中的每个数据表包括多个分片，每个所述分片具有多个副本，所述分片的多个副本分别存储在不同的所述片服务器，所述分片的多个副本包括一个主副本和至少一个从副本，所述分布式存储系统包括：