[发明专利]分布式存储系统中元数据存储方法、系统及存储介质

说明书

公开了一种分布式存储系统中元数据存储方法，在分布式存储系统中，在EC算法组成的元数据分条实现数据可靠性的场景下，主数据存储节点备份元数据分条中其他元数据块，因为只需要将数据存储节点上的元数据块在主数据存储节点上备份，相比现有技术中所有元数据块多副本，减少了存储空间，同时在客户端访问元数据时，只需要从主数据存储节点访问所有元数据块，提高了元数据访问速度。

本案是专利申请号为201710508014.8，申请日为2017年6月28日，发明名称为“分布式存储系统中元数据存储方法、系统及存储介质”的分案申请。

技术领域

本发明涉及数据存储技术领域，尤其涉及一种分布式存储系统中元数据存储方法、系统及存储介质。

背景技术

在分布式存储系统中，管理节点将用户数据存储到存储节点后，会产生记录数据的逻辑地址，物理地址等的元数据，元数据也要存储到存储节点。常见的元数据存储方式是将元数据分条中的块打散到各存储节点，读取该元数据时，需要从各存储节点读取元数据分条中的块，拼凑成元数据分条，但存储节点间数据转发量大，影响性能。另外一种方式元数据在存储节点以多副本形式存储，但会增加存储空间开销。

发明内容

第一方面，本发明实施例提供了一种分布式存储系统中元数据存储方案，在所述分布式存储系统中包含管理节点和(M+N)个存储节点，所述管理节点和(M+N)个存储节点均存储有元数据分条的分区视图；所述元数据分条的分区视图包含主数据存储节点DS_A、数据存储节点DS_i和校验存储节点CS_r；其中，N为不小于2的自然数，M为不小于1的自然数，A为自然数1至N中的一个，i为自然数1至N中的除A外的每一个，r为自然数1至M中的每一个；在所述存储方案中：所述管理节点根据所述元数据分条的分区视图为所述元数据分条确定主数据存储节点DS_A、数据存储节点DS_i和校验存储节点CS_r；所述元数据分条包含元数据块D_A、D_i以及校验块C_r，将D_i发送到所述数据存储节点DS_i，将D_A发送到所述主数据存储节点DS_A，将Cr发送到所述校验存储节点CS_r；所述校验存储节点CS_r接收并存储C_r；所述数据存储节点DS_i接收并存储D_i，并根据所述元数据分条的分区视图将D_i发送到所述主数据存储节点DS_A；所述主数据存储节点DS_A接收并存储D_A和D_i。在本方案中，在实现元数据使用纠删码(ErasureCoding,EC)保护机制下，主数据存储节点DS_A备份元数据分条中其他元数据块D_i，因为只需要将数据存储节点DS_i上的元数据块D_i在主数据存储节点DS_A上备份，相比现有技术中所有元数据块多副本，不需要校验块副本，减少了存储空间，同时在客户端访问元数据时，可以从主数据存储节点DS_A访问所有元数据块，提高了元数据访问速度。本方案的分布式存储系统可以为分布式文件系统、分布式对象存储系统或分布式块设备存储。

可选的，所述管理节点根据所述元数据分条的分区视图为所述元数据分条确定主数据存储节点DS_A、数据存储节点DS_i和校验存储节点CS_r，具体包括：所述管理节点根据产生所述元数据分条中的元数据的写请求确定所述元数据分条对应的分区；所述管理节点根据所述元数据分条对应的分区查询所述元数据分条的分区视图确定所述主数据存储节点DS_A、所述数据存储节点DS_i和所述校验存储节点CS_r。