[发明专利]一种归置组分配方法、装置以及分布式存储系统有效
申请号: | 202110149455.X | 申请日: | 2021-02-03 |
公开(公告)号: | CN112817535B | 公开(公告)日: | 2021-11-02 |
发明(设计)人: | 孟军;郭军 | 申请(专利权)人: | 柏科数据技术(深圳)股份有限公司 |
主分类号: | G06F3/06 | 分类号: | G06F3/06;H04L29/08 |
代理公司: | 深圳市君胜知识产权代理事务所(普通合伙) 44268 | 代理人: | 温宏梅 |
地址: | 518000 广东省深圳市南山区桃源街道福光社区留仙大*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 归置 组分 配方 装置 以及 分布式 存储系统 | ||
本申请公开了一种归置组分配方法、装置以及分布式存储系统,所述方法包括:获取目标归置组PG对应的目标存储池,并确定目标存储池对应的目标分配规则组;利用CRUSH算法,基于所述分配规则组确定所述目标归置组PG对应的目标对象存储设备ODS,并将所述目标归置组PG分配至所述目标对象存储设备ODS。本申请中的每个存储池均配置有分配规则组,并且在确定目标归置组PG对应的目标对象存储设备ODS时,会根据该目标归置组PG对应的存储池对应给的目标分配规则组来确定,这样可以为服务场景不同的存储池配置不同的分配规则组,使得分配至该存储池的归置组可以合适的目标对象存储设备ODS,提高了归置组PG分配的灵活性。
技术领域
本申请涉及分布式数据存储技术领域,特别涉及一种归置组分配方法、装置以及分布式存储系统。
背景技术
Ceph(赛弗)集群是一种分布式存储系统,其以优异的性能以及良好的伸缩性著称。在生产环境中,集群的规模可能会相当庞大,容纳着数以千计的对象存储设备ODS,并且通过创建不同的存储池,来为不同的应用、不同的用户以及不同的接口形式提供着存储服务。不同的存储池所服务的目标不同,从而会通过给不同的存储池绑定不同的CRUSH rule来划分对象存储设备。但是,由于存储设备的类型、容量、以及性能可能各不相同,那么如何控制文件对象在各对象存储设备上的分布概率,以充分利用各对象存储设备成为亟待解决的技术问题。
发明内容
本申请要解决的技术问题在于,针对现有技术的不足,提供一种归置组分配方法、装置以及分布式存储系统。
为了解决上述技术问题,本申请实施例第一方面提供了一种归置组分配方法,其应用于分布式存储系统Ceph集群中的监视器,所述Ceph集群包括若干存储池,并且若干存储池中的每个存储池均对应一分配规则组;所述方法包括:
获取目标归置组PG对应的目标存储池,并确定所述目标存储池对应的目标分配规则组,其中,所述目标分配规则组包括权重系数集,所述权重系数集包括各对象存储设备ODS各自对应的权重系数;
利用CRUSH算法,基于所述分配规则组确定所述目标归置组PG对应的目标对象存储设备ODS,并将所述目标归置组PG分配至所述目标对象存储设备ODS。
所述归置组分配方法,其中,所述若干存储池中至少存在第一存储池和第二存储池,第一存储池对应的分配规则组与第二存储池对应的分配规则组不同。
所述归置组分配方法,其中,所述若干存储池对应的所有分配规则组中包括一默认分配规则组,所述归置组分配方法还包括:
当Ceph集群新建存储池时,将所述默认分配规则组分配给该存储池。
所述归置组分配方法,其中,所述默认分配规则组为Ceph集群初始化时配置的,所述默认分配规则组中的权重系数集为Ceph集群的全局权重系数集。
所述归置组分配方法,其中,所述目标分配规则组包括CRUSH规则,所述利用CRUSH算法,基于所述分配规则组确定所述目标归置组PG对应的目标对象存储设备ODS具体包括:
读取所述目标分配规则组包括的CRUSH规则以及权重系数集;
基于权重系数集,利用CRUSH算法执行所述CRUSH规则以确定所述目标归置组PG对应的目标对象存储设备ODS。
所述归置组分配方法,其中,所述基于权重系数集,利用CRUSH算法执行所述CRUSH规则以确定所述目标归置组PG对应的目标对象存储设备ODS具体包括:
获取所述目标存储池的副本数;
将所述权重系数集及所述副本数作为CRUSH算法的输入项,根据所述CRUSH规则执行CRUSH算法以得到所述目标归置组PG对应的目标对象存储设备ODS。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于柏科数据技术(深圳)股份有限公司,未经柏科数据技术(深圳)股份有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202110149455.X/2.html,转载请声明来源钻瓜专利网。