[发明专利]一种数据读取、存储方法及装置

说明书

本申请实施例提供了一种数据读取、存储方法及装置，涉及数据处理技术领域，上述方法包括：接收数据读取请求，数据读取请求中携带：以纠删码方式存储的待读取多媒体数据对应的存储时间信息；根据数据读取请求中携带的存储时间信息，从目标索引文件中获得目标数据组的存储位置信息，目标索引文件，用于存储以纠删码方式存储的多媒体数据包含的每一数据组在目标数据块中的存储位置信息和存储时间信息，目标数据块为：存储多媒体数据的条带包含的数据块，目标数据组为：待读取多媒体数据包含的数据组；依据所确定的存储位置信息，读取待读取多媒体数据。应用本申请实施例提供的技术方案，能够减少读取按照纠删码方式存储的多媒体数据时失败的次数。

技术领域

本申请涉及数据处理技术领域，特别是涉及一种数据读取、存储方法及装置。

背景技术

随着社会发展，人们在工作、生活中需要存储的多媒体等数据越来越多，为满足人们的上述需求，在越来越多的应用场景中选择将多媒体等数据存储在分布式存储系统中。

在分布式存储系统中进行数据存储时，考虑到数据完整性、增强数据保护等因素，常常以纠删码的方式进行数据存储。

其中，以纠删码的方式进行数据存储可以理解为，将数据划分为k段存储在k个数据块中，然后再根据上述k段数据以及特定的数据处理算法得到m段冗余数据，并存储在m个数据块中，上述(k+m)个数据块构成一个条带。

当上述(k+m)个数据块中处于损坏状态的数据块不超过m个时，可以根据剩余处于非损坏状态的数据块中存储的数据，恢复出处于损坏状态的数据块中存储的数据。

读取按照上述方式进行数据存储而得到的一个条带中的部分数据时，在(k+m)个数据块中存储的数据均存在的情况下，才能确定要读取的部分数据在(k+m)个数据块中的存储位置，从而实现数据读取。当其中若干个数据块处于损坏状态时，需要先通过处于非损坏状态的数据块中存储的数据恢复出处于损坏状态的数据块中存储的数据，再进行数据读取。

虽然大多数情况下应用上述方式可以实现数据读取，但是当处于损坏状态的数据块的数量超过m个时，通过处于非损坏状态的数据块中存储的数据，无法恢复出处于损坏状态的数据块中存储的数据，也就无法保证(k+m)个数据块中存储的数据均存在，进而导致数据读取失败。

发明内容

本申请实施例的目的在于提供一种数据读取、存储方法及装置，以减少读取按照纠删码方式存储的多媒体数据时失败的次数。具体技术方案如下：

第一方面，本申请实施例提供了一种数据读取方法，所述方法包括：

接收数据读取请求，其中，所述数据读取请求中携带：以纠删码方式存储的待读取多媒体数据对应的存储时间信息；

根据所述数据读取请求中携带的存储时间信息，从目标索引文件中获得目标数据组的存储位置信息，其中，所述目标索引文件，用于存储以纠删码方式存储的多媒体数据包含的每一数据组在目标数据块中的存储位置信息和存储时间信息，目标数据块为：存储多媒体数据的条带包含的数据块，目标数据组为：所述待读取多媒体数据包含的数据组；

依据所确定的存储位置信息，读取所述待读取多媒体数据。

本申请的一种实现方式中，在所述接收数据读取请求的步骤之后，还包括：

确定用于存储所述待读取多媒体数据的条带包含的数据块；

获得第一类数据块的数量，其中，所述第一类数据块为：所确定数据块中处于损坏状态的数据块；

判断所获得数量是否超过预设数量；

若为是，执行所述根据所述数据读取请求中携带的存储时间信息，从目标索引文件获得目标数据组的存储位置信息的步骤；