[发明专利]一种基于对象存储组件的超大文件管理方法及系统

权利要求书

1.一种基于对象存储组件的超大文件管理方法，其特征在于，包括：

增加有存储应用程序编程接口API的客户端，在接收到外部经所述存储API而提供的超大文件时，判断所述超大文件的大小是否大于预设的分割阈值，若是，根据所述分割阈值，将所述超大文件依序分割为至少两个子文件，任一所述子文件的大小均不大于所述分割阈值，并基于所述超大文件的唯一文件名记录每一个所述子文件的分割情况；

所述客户端将所述至少两个子文件及各子文件的分割情况发送给对象存储组件；

所述对象存储组件在接收到所述至少两个子文件及各子文件的分割情况时，生成每一个所述子文件的ID；将所述至少两个子文件分散存储至内部的对象存储节点集群中，并记录每一个所述子文件的存储情况；将每一个所述子文件的元数据信息存储至内部的元数据节点中，所述元数据信息包括分割情况、ID和存储情况；

所述将所述至少两个子文件分散存储至内部的对象存储节点集群中，包括：针对所述至少两个子文件中的每一个子文件均执行：判断内部的对象存储节点集群中是否存在至少一个满足公式组一的第一对象存储节点，若是，从所述至少一个第一对象存储节点中挑选出至少一个满足公式一的第二对象存储节点，并将当前子文件存储至任一所述第二对象存储节点中；

所述公式组一包括：

所述公式一包括：

其中，x₁为一所述第一对象存储节点的剩余存储容量，a为所述分割阈值，x_i为所述对象存储节点集群中第i个对象存储节点的剩余存储容量，n为所述对象存储节点集群中对象存储节点的总个数，为一所述第二对象存储节点的剩余存储容量与总存储容量的比值，max为求最大值，x_1j为所述至少一个第一对象存储节点中第j个第一对象存储节点的剩余存储容量，X_1j为所述第j个第一对象存储节点的总存储容量。

2.根据权利要求1所述的方法，其特征在于，

所述客户端上还增加有获取API；

该方法进一步包括：所述客户端在接收到外部经所述获取API而输入的所述唯一文件名时，将所述唯一文件名发送给所述对象存储组件；

所述对象存储组件在接收到所述客户端经所述获取API而发来的所述唯一文件名时，根据所述唯一文件名获取每一个所述子文件的元数据信息；根据获取到的每一个所述子文件的ID和存储情况，获取所述至少两个子文件；将获取到的所述至少两个子文件及各子文件的分割情况发送给所述客户端；

所述客户端在接收到所述至少两个子文件及各子文件的分割情况时，根据每一个所述子文件的分割情况，将所述至少两个子文件拼装成所述超大文件，并输出拼装出的所述超大文件。

3.根据权利要求1所述的方法，其特征在于，

所述客户端上还增加有更名API；

该方法进一步包括：所述客户端在接收到外部经所述更名API而输入的新文件名和待更改的所述唯一文件名时，将所述新文件名和所述唯一文件名发送给所述对象存储组件；

所述对象存储组件在接收到所述客户端经所述更名API而发来的所述新文件名和所述唯一文件名时，根据所述唯一文件名获取每一个所述子文件的元数据信息；将获取到的每一个元数据信息中的所述唯一文件名均更改为所述新文件名；

和/或，

所述客户端上还增加有删除API；

该方法进一步包括：所述客户端在接收到外部经所述删除API而输入的所述唯一文件名时，将所述唯一文件名发送给所述对象存储组件；

所述对象存储组件在接收到所述客户端经所述删除API而发来的所述唯一文件名时，根据所述唯一文件名获取每一个所述子文件的元数据信息；根据获取到的每一个所述子文件的存储情况，删除所述对象存储节点集群中的所述至少两个子文件；删除所述元数据节点中的每一个所述子文件的元数据信息。

4.根据权利要求1所述的方法，其特征在于，

所述分割情况包括：子文件名称和子文件大小；

其中，所述子文件名称包括：所述唯一文件名和序号；

其中，每一个所述子文件的子文件名称中的序号，按照子文件分割获得顺序依次增大；

所述至少两个子文件中，除末位分割出的子文件之外，任一其他子文件的子文件大小均等于所述分割阈值。