[发明专利]一种元数据集群动态子树分区方法及装置

说明书

技术领域

本发明涉及分布式文件系统领域，更具体地说，涉及一种元数据集群动态子树分区方法及装置。

背景技术

目前，在视频监控应用中，用户会为每个摄像头每天创建一个目录，然后每天将监控数据直接写到该目录下，特别是卡口图片的存储，会涉及大量的元数据操作，因此，针对：客户应用每天会新建很多目录，然后在这些目录下同时写入大量数据的这种场景，可使用元数据集群来提升元数据性能和负载均衡。目前，元数据集群性能提升和负载均衡有两种方式：元数据集群静态子树分区和元数据集群动态子树分区。元数据集群静态子树分区容易实现，就是通过子树分区命令，手动对已存在的目录进行分区，这种使用方式不友好，也不能实现负载的有效均衡。元数据集群动态子树分区是依据一定的元数据负载算法，将负载自动均衡到各元数据上，该方式很难实现，目前还没有看到具备动态子树分区的产品。

因此，如何实现元数据集群的动态子树分区，是本领域技术人员需要解决的问题。

发明内容

本发明的目的在于提供及一种元数据集群动态子树分区方法及装置，以实现动态的向新建的目录分配元数据服务。

为实现上述目的，本发明实施例提供了如下技术方案：

一种元数据集群动态子树分区方法，包括：

根据目录结构确定动态子树分区目录级别，所述动态子树分区目录级别下的目录与元数据集群中的元数据服务相对应；

在新建目录时，若新建的目录属于所述动态子树分区目录级别，则向所述新建的目录分配元数据服务。

其中，若新建的目录不属于所述动态子树分区目录级别，则直接创建目录。

其中，所述若新建的目录属于所述动态子树分区目录级别，则向所述新建的目录分配元数据服务，包括：

若新建的目录属于所述动态子树分区目录级别，则以轮训方式，将所述新建的目录分配至所述元数据集群中的元数据服务。

其中，所述根据目录结构确定动态子树分区目录级别，包括：

将目录结构中新建目录频率大于预定阈值的目录级别，作为所述动态子树分区目录级别。

一种元数据集群动态子树分区装置，包括：

目录级别确定模块，用于根据目录结构确定动态子树分区目录级别，所述动态子树分区目录级别下的目录与元数据集群中的元数据服务相对应；

元数据服务分配模块，用于在新建目录时，若新建的目录属于所述动态子树分区目录级别，则向所述新建的目录分配元数据服务。

其中，包括：

判断模块，用于判断新建的目录是否属于所述动态子树分区目录级别；

目录创建模块，用于在新建的目录不属于所述动态子树分区目录级别时，直接创建目录。

其中，所述元数据服务分配模块，以轮训方式，将所述新建的目录分配至所述元数据集群中的元数据服务。

其中，所述目录级别确定模块将目录结构中新建目录频率大于预定阈值的目录级别，作为所述动态子树分区目录级别。

通过以上方案可知，本发明实施例提供的一种元数据集群动态子树分区方法，包括：根据目录结构确定动态子树分区目录级别，所述动态子树分区目录级别下的目录与元数据集群中的元数据服务相对应；在新建目录时，若新建的目录属于所述动态子树分区目录级别，则向所述新建的目录分配元数据服务；

可见，在本方案中，首先根据新建目录的频率确定态子树分区目录级别，然后在该目录级别上新建的目录会依据元数据服务个数，轮询将目录分配到元数据服务上，这样，在这些目录下IO负载就均衡到每个元数据服务上，从而实现元数据集群动态子树分区，提升元数据服务性能；本发明还公开了一种元数据集群动态子树分区装置，同样能实现上述技术效果。

附图说明

为了更清楚地说明本发明实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。

图1为本发明实施例公开的一种元数据集群动态子树分区方法流程示意图；

图2为本发明实施例公开的一种具体的元数据集群动态子树分区方法流程示意图；

图3为本发明实施例公开的动态子树分区示意图；

图4为本发明实施例公开的一种元数据集群动态子树分区装置结构示意图。

具体实施方式