[发明专利]一种基于分布式文件系统的数据恢复方法及装置

说明书

本发明公开了一种基于分布式文件系统的数据恢复方法及装置，用以解决现有技术中数据发生异常无法及时恢复的问题，该方法为：元数据服务器确定存储于任意一个数据服务器中的一个真实数据片发生异常时，确定发生异常的真实数据片所归属的数据块中其它所有正常的真实数据片和校验数据片；元数据服务器计算每一个数据服务器的富于负载能力；并根据每一个数据服务器的富于负载能力，在所有数据服务器中筛选出数据片恢复数据服务器；根据其它所有正常的真实数据片和校验数据片，在该数据片恢复数据服务器中恢复发生异常的真实数据片。这样，综合考虑数据服务器的负载能力，进行恢复异常数据，最大限度的节省了数据恢复的时间，提高了数据恢复的效率。

技术领域

本发明涉及分布式文件系统领域，尤其涉及一种基于分布式文件系统的数据恢复方法及装置。

背景技术

随着因特网的快速发展，因特网上的数据将呈现爆发式的增长，而存储这些海量数据的分布式文件系统(Distributed File System，DFS)往往会因为底层硬件磁盘损坏以及系统故障等不可预知的原因造成部分数据被损坏，进而导致部分文件不可读取。一旦出现被损坏的文件，DFS会根据损坏文件的元数据信息重新恢复被损坏的文件，从而保证在DFS内数据的安全性。

目前主流的DFS往往采用硬件磁盘阵列(Redundant Array of IndependentDisk，RAID)磁盘的方式或者文件副本的方式进行文件的存储。其中，对于采用硬件RAID磁盘的方式进行文件存储的这种方法，当构成RAID磁盘组中的某块磁盘损坏后，则存储在该损坏磁盘上的所有文件都将失效，此时必须人为的手动插入一块磁盘以重新组成RAID磁盘组来恢复受损的文件，因此需要人为的干预。对于采用文件副本的方式进行文件存储的这种方法，如果当某块磁盘被受损后，则该损坏磁盘上的所有文件都将失效，此时必须根据元数据信息从其他某块单独的磁盘读取原来文件的备份信息来进行恢复，但是此种情况恢复速度往往受限于单个磁盘的读取和写入速度，显然，受损文件恢复过程比较长，此外如果系统副本数据分布不均衡的话，例如，同一磁盘的多个副本集中存储某个磁盘，则受损文件的恢复过程会更长。

总之，现有技术中采用RAID磁盘的方式进行文件存储在数据恢复过程中，需要人工更换磁盘，会导致数据无法及时恢复，采用文件副本的方式进行文件存储在数据恢复过程中，由于单个磁盘的读写速度较慢以及系统副本数据分布不均衡时，导致数据恢复过程耗时较长，降低了数据恢复效率。

发明内容

本发明实施例提供一种基于分布式文件系统的数据恢复方法及装置，用以解决现有技术中采用RAID磁盘的方式进行文件存储在数据恢复过程中，需要人工更换磁盘，导致的数据无法及时恢复的问题，以及采用文件副本的方式进行文件存储在数据恢复过程中，由于单个磁盘的读写速度较慢以及系统副本数据分布不均衡，导致数据恢复过程耗时较长，降低了数据恢复效率的问题。

本发明实施例提供的具体技术方案如下：

一种基于分布式文件系统的数据恢复方法，包括：

元数据服务器确定存储于任意一个数据服务器中的一个真实数据片发生异常时，确定发生异常的真实数据片所归属的数据块中其它所有正常的真实数据片和校验数据片；

元数据服务器获取每一个数据服务器的负载信息，并根据所述每一个数据服务器的负载信息，计算所述每一个数据服务器的富于负载能力；

元数据服务器根据所述每一个数据服务器的富于负载能力，在所有数据服务器中筛选出数据片恢复数据服务器；

元数据服务器根据所述发生异常的真实数据片所归属的数据块中的其它所有正常的真实数据片和校验数据片，在所述数据片恢复数据服务器中恢复所述发生异常的真实数据片。