[发明专利]数据读取方法、装置和系统

说明书

本文是关于一种数据读取方法、装置和系统。涉及计算机互联网领域，解决了频繁的数据恢复操作浪费资源的问题。该方法包括：接收同集群或其他集群中数据请求方发送的指向本恢复用服务器的第二数据读取请求，在所述第二数据读取请求中携带归属于本恢复用服务器进行恢复的目标数据的信息；根据所述目标数据的信息，获取恢复所述目标数据所需的至少一个数据组；根据所述数据组，恢复得到所述目标数据，缓存在本地；向所述数据请求方返回所述目标数据。本文提供的技术方案适用于分布式数据存储系统，实现了高效、可靠的数据读取。

技术领域

本文涉及计算机互联网领域，尤其涉及一种数据读取方法、装置和系统。

背景技术

在分布式存储系统中，由于数据损坏、磁盘损坏或机器宕机等原因，会造成数据不可读取。为了不影响数据的实时读取，可以通过纠删码(EC)技术，使用与不可读取的数据块关联的其他数据块，对不可读取的数据块进行恢复。

在针对同一个文件出现高并发下载请求的情况下，有可能发生大量对不可读取数据块的恢复操作，导致浪费大量的CPU、带宽、磁盘等资源。

发明内容

为克服相关技术中存在的问题，本文提供一种数据读取方法、装置和系统。

根据本文的一方面，提供了一种数据读取方法，包括：

接收同集群或其他集群中数据请求方发送的指向本恢复用服务器的第二数据读取请求，在所述第二数据读取请求中携带归属于本恢复用服务器进行恢复的目标数据的信息；

根据所述目标数据的信息，获取恢复所述目标数据所需的至少一个数据组；

根据所述数据组，恢复得到所述目标数据，缓存在本地；

向所述数据请求方返回所述目标数据。

优选的，接收同集群或其他集群中数据请求方发送的指向本恢复用服务器的第二数据读取请求的步骤之前，还包括：

所述恢复用服务器归属的恢复集群接收所述数据请求方发送的第一数据读取请求，在所述第一数据读取请求中携带预置为归属于本恢复集群恢复的目标数据的信息；

根据预置的分配规则，选择执行恢复操作的恢复用服务器，根据所述第一数据读取请求生成所述第二数据读取请求，向所述恢复用服务器发送。

优选的，所述目标数据的信息至少包括：

恢复所述目标数据所需的所述数据组的存储位置，所述数据组包含至少一个与所述目标数据关联的关联数据文件和至少一个校验文件。

优选的，所述接收同集群或其他集群中数据请求方发送的指向本恢复用服务器的第二数据读取请求的步骤之后，还包括：

根据所述第二数据读取请求，查找本地缓存的数据；

在本地缓存的数据中存在所述目标数据的情况下，向所述数据读取方发送所述目标数据。

根据本文的另一方面，提供了一种数据读取方法，包括：

在判定源站上待读取的目标数据无法读取的情况下，根据预置的恢复配置文件确定所述目标数据指向的恢复系统；

向所述恢复系统发送请求，以自所述恢复系统获取正常的所述目标数据。

优选的，所述恢复系统包括恢复用服务器或由至少一个恢复用服务器构成的恢复集群，所述根据预置的恢复配置文件确定所述目标数据指向的恢复系统的步骤包括：

根据所述目标数据的哈希值，通过一致性哈希算法，确定所述哈希值指向的恢复用服务器和/或恢复集群。

优选的，向所述恢复系统发送请求，自所述恢复系统获取正常的所述目标数据的步骤包括：