[发明专利]一种分布式文件系统的数据迁移方法、系统及相关组件

说明书

本申请公开了一种分布式文件系统的数据迁移方法，所述迁移方法包括当数据命名空间内副本磁盘的数量发生变化时，根据数据命名空间的负载均衡性要求确定磁盘替换信息；其中，分布式文件系统包括目录命名空间和数据命名空间，数据命名空间用于提供数据存储业务，目录命名空间用于存储分布式文件系统的目录结构和数据命名空间内每一文件的文件路由；根据磁盘替换信息将原副本磁盘内的数据迁移至目标副本磁盘。本方法能够使分布式文件系统的副本磁盘的数量发生变化时，降低迁移的数据量，提高数据迁移的效率。本申请还公开了一种分布式文件系统的数据迁移系统、一种计算机可读存储介质及一种电子设备，具有以上有益效果。

技术领域

本发明涉及分布式存储技术领域，特别涉及一种分布式文件系统的数据迁移方法、系统、一种计算机可读存储介质及一种电子设备。

背景技术

随着计算机技术的快速发展，分布式文件系统的应用越来越广泛，如GlusterFS分布式文件系统。

现有的GlusterFS分布式文件系统框架结构采用全局统一命名空间，文件和目录在一起。每一块数据盘对应一个管理进程Brick，每个管理进程负责接收RPC(RemoteProcedure Call，远程过程调用)的调用将数据写入数据盘，每一个管理进程只属于一个副本组，一个副本组一般由2或3个管理进程组成镜像关系，类似于RAID(Redundant Arraysof Independent Drives，磁盘阵列)。每个文件只存储于一个副本组内，文件分布采用一致性哈希DHT(Distributed Hash Table，分布式哈希表)算法。

这种框架结构存在一定的缺点，当其中一个数据盘损坏时，需要对该数据盘对应的整个副本组进行迁移，文件路由的改变必须是一个数据副本组的所有磁盘都变化，即迁移只能按照副本组粒度进行，没有损坏的数据盘中的文件也需要进行迁移，迁移工作量较大，工作效率较低。

因此，如何使分布式文件系统的副本磁盘的数量发生变化时，降低迁移的数据量，提高数据迁移的效率是本领域技术人员目前需要解决的技术问题。

发明内容

本申请的目的是提供一种分布式文件系统的数据迁移方法、系统、一种计算机可读存储介质及一种电子设备，能够使分布式文件系统的副本磁盘的数量发生变化时，降低迁移的数据量，提高数据迁移的效率。

为解决上述技术问题，本申请提供一种分布式文件系统的数据迁移方法，该数据迁移方法包括：

当数据命名空间内副本磁盘的数量发生变化时，根据数据命名空间的负载均衡性要求确定磁盘替换信息；其中，分布式文件系统包括目录命名空间和数据命名空间，数据命名空间用于提供数据存储业务，目录命名空间用于存储分布式文件系统的目录结构和数据命名空间内每一文件的文件路由，磁盘替换信息包括原副本磁盘的磁盘信息和目标副本磁盘的磁盘信息；

根据磁盘替换信息将原副本磁盘内的数据迁移至目标副本磁盘。

可选的，目录命名空间包括第一数量个目录副本组，数据命名空间包括第二预设数量个数据副本组；

其中，目录副本组包括多个第一虚拟节点，每个第一虚拟节点分别与目录命名空间的一个第一管理进程连接，每个第一管理进程对应一个元数据盘，数据副本组包括多个第二虚拟节点，每个第二虚拟节点分别与数据命名空间的所有第二管理进程连接，每个第二管理进程对应一个副本磁盘。

可选的，根据数据命名空间的负载均衡性要求确定磁盘替换信息之后，还包括：

根据磁盘替换信息将目录命名空间中的原文件路由更新为新文件路由，并向第二虚拟节点发送路由更新提示；其中，所述原文件路由为所述原副本磁盘对应的文件路由，所述新文件路由为所述目标副本磁盘对应的文件路由。

可选的，还包括：