[发明专利]一种元数据更新方法、装置及元数据服务器

说明书

本申请公开了一种元数据更新方法、装置、元数据服务器及可读存储介质，方案包括：获取本地记录的目标文件的文件大小以及为目标文件分配的可写范围区段；利用二分查找法根据本地记录的文件大小和可写范围区段，从数据管理模块查找目标文件的最后写入的对象；根据最后写入的对象，确定目标文件的真实文件大小，并更新本地记录的文件大小。可见，该方案根据元数据服务器上记录的目标文件的文件大小以及为目标文件分配的可写范围区段，利用二分查找法查找目标文件的最后写入的对象，避免了传统方案逐个查找导致耗时过长的问题，显著提升了文件元数据恢复的效率。

技术领域

本申请涉及存储领域，特别涉及一种元数据更新方法、装置、元数据服务器及可读存储介质。

背景技术

在分布式文件系统使用过程中，客户端向集群中的文件写入数据的时候，写数据和写元数据会异步分离，即通过数据管理模块写入文件数据，写完后在后续时间里，客户端会使用异步更新元数据的方法，将缓存在内存中的文件大小等元数据信息更新到MDS。

但是，异步更新元数据在提升性能的同时也可能导致文件元数据大小不正确的问题，比如数据已经写入到数据管理模块，但是客户端还没有将新的大小信息更新到MDS，客户端所在的节点因发生断电或宕机导致其缓存的文件元数据信息丢失。

文件元数据丢失的情况下，需要进行文件元数据恢复。在恢复过程中，需要从数据管理模块遍历所有的对象，找到最后一个对象，据此确定文件的实际大小。这个过程会从MDS分配的“可写范围”最大值开始处理，假设“可写范围”是0～2G，文件实际大小是1G，从2G开始一直遍历到0，每个对象大小是4M，遍历过程就需要512次操作，导致单个文件恢复耗时就可能达到几十秒以上，效率极低。

可见，如何提升文件元数据恢复效率，是亟待本领域技术人员解决的问题。

发明内容

本申请的目的是提供一种元数据更新方法、装置、元数据服务器及可读存储介质，用以解决传统的文件元数据恢复方案效率低下的问题。具体方案如下：

第一方面，本申请提供了一种元数据更新方法，应用于分布式文件系统的元数据服务器，包括：

获取本地记录的目标文件的文件大小以及为所述目标文件分配的可写范围区段；

利用二分查找法根据所述本地记录的文件大小和所述可写范围区段，从数据管理模块查找所述目标文件的最后写入的对象；

根据所述最后写入的对象，确定所述目标文件的真实文件大小，并更新所述本地记录的文件大小。

优选的，所述利用二分法根据所述本地记录的文件大小和所述可写范围区段，从数据管理模块查找所述目标文件的最后写入的对象，包括：

将所述可写范围区段中最大值对应的偏移位置作为起点，所述本地记录的文件大小对应的偏移位置作为终点，确定所述起点和所述终点的中间点；

在数据管理模块中，判断所述中间点上是否存在所述目标文件的对象；

若所述中间点上存在所述目标文件的对象，判断该对象是否为所述目标文件的最后写入的对象；

若是，则确认查找得到所述最后写入的对象，否则将所述终点更新为当前的中间点，并重复查找过程。

优选的，所述判断该对象是否为所述目标文件的最后写入的对象，包括：

确定从所述中间点起沿着偏移量增大的方向与所述中间点相隔一个对象大小的偏移位置，判断该偏移位置是否为所述起点；若是，则确认该对象为所述目标文件的最后写入的对象，否则确认该对象不为所述目标文件的最后写入的对象。

优选的，所述根据所述最后写入的对象，确定所述目标文件的真实文件大小，包括：