[发明专利]一种分布式存储系统的数据校验方法及相关装置

权利要求书

1.一种分布式存储系统的数据校验方法，其特征在于，包括：

从硬盘读取目标数据，并计算所述目标数据中每预设校验区间长度的数据的CRC校验值，得到第一CRC校验值；

从数据库中读取写所述目标数据时，计算所述目标数据中每预设校验区间长度的数据的CRC校验值所得到的第二CRC校验值；

分别将各所述第一CRC校验值与相应的所述第二CRC校验值进行比对；

若所述第一CRC校验值与相应的所述第二CRC校验值不一致，则确定所述硬盘中的所述目标数据发生错误。

2.根据权利要求1所述的数据校验方法，其特征在于，写所述目标数据时，计算所述目标数据中每预设校验区间长度的数据的CRC校验值，包括：

若所述目标数据对应的写入区间的起始位置与终止位置是所述预设校验区间长度的整数倍，则直接计算所述目标数据中每预设校验区间长度的数据的CRC校验值。

3.根据权利要求1所述的数据校验方法，其特征在于，写所述目标数据时，计算所述目标数据中每预设校验区间长度的数据的CRC校验值，包括：

若所述目标数据的写入区间的起始位置和/或终止位置不是所述预设校验值计算长度的整数倍，则从所述硬盘中读取所述起始位置前为所述预设校验区间长度的整数倍的位置至所述起始位置的已写入数据，和/或，从所述硬盘中读取所述终止位置至所述终止位置后为所述预设校验区间长度的整数倍的位置的已写入数据；

计算所述已写入数据与所述目标数据中每预设校验区间长度的数据的CRC校验值。

4.根据权利要求1所述的数据校验方法，其特征在于，所述第二CRC校验值存入所述数据库包括：

所述第二CRC校验值及所述第二CRC校验值对应的所述数据在对象中的偏移量以map的形式存储于所述数据库。

5.根据权利要求1所述的数据校验方法，其特征在于，所述从硬盘读取目标数据包括：

接收读请求时或触发主动校验时从所述硬盘读取所述目标数据。

6.根据权利要求5所述的数据校验方法，其特征在于，接收读请求时从所述硬盘读取目标数据，并计算所述目标数据中每预设校验区间长度的数据的CRC校验值，包括：

根据所述读取请求确定所述目标数据对应的读取区间的起始位置与终止位置；

若所述目标数据对应的读取区间的起始位置与终止位置是所述预设校验区间长度的整数倍，则直接读取并计算所述目标数据中每预设校验区间长度的数据的CRC校验值；

若所述目标数据的读取区间的起始位置和/或终止位置不是所述预设校验值计算长度的整数倍，则从所述硬盘中读取所述起始位置前为所述预设校验区间长度的整数倍的位置至所述起始位置的数据与所述目标数据，和/或读取所述终止位置至所述终止位置后为所述预设校验区间长度的整数倍的位置的数据与所述目标数据；计算读取的所述数据与所述目标数据中每预设校验区间长度的数据的CRC校验值。

7.根据权利要求1所述的数据校验方法，其特征在于，还包括：

当所述目标数据发生错误时，将所述目标数据添加到重构队列进行数据重构。

8.一种分布式存储系统的数据校验装置，其特征在于，包括：

计算模块，用于从硬盘读取目标数据，并计算所述目标数据中每预设校验区间长度的数据的CRC校验值，得到第一CRC校验值；

读取模块，用于从数据库中读取写所述目标数据时，计算所述目标数据中每预设校验区间长度的数据的CRC校验值所得到的第二CRC校验值；

比对模块，用于分别将各所述第一CRC校验值与相应的所述第二CRC校验值进行比对；

确定模块，用于若所述第一CRC校验值与相应的所述第二CRC校验值不一致，则确定所述硬盘中的所述目标数据发生错误。

9.一种分布式存储系统的数据校验设备，其特征在于，包括：

存储器，用于存储计算机程序；

处理器，用于执行所述计算机程序时实现如权利要求1至7任一项所述的分布式存储系统的数据校验方法的步骤。

10.一种计算机可读存储介质，其特征在于，所述计算机可读存储介质存储有计算机程序，所述计算机程序被处理器执行时实现如权利要求1至7任一项所述的分布式存储系统的数据校验方法的步骤。