[发明专利]一种归置组分配方法、装置以及分布式存储系统有效

专利信息
申请号: 202110149455.X 申请日: 2021-02-03
公开(公告)号: CN112817535B 公开(公告)日: 2021-11-02
发明(设计)人: 孟军;郭军 申请(专利权)人: 柏科数据技术(深圳)股份有限公司
主分类号: G06F3/06 分类号: G06F3/06;H04L29/08
代理公司: 深圳市君胜知识产权代理事务所(普通合伙) 44268 代理人: 温宏梅
地址: 518000 广东省深圳市南山区桃源街道福光社区留仙大*** 国省代码: 广东;44
权利要求书: 查看更多 说明书: 查看更多
摘要:
搜索关键词: 一种 归置 组分 配方 装置 以及 分布式 存储系统
【说明书】:

本申请公开了一种归置组分配方法、装置以及分布式存储系统,所述方法包括:获取目标归置组PG对应的目标存储池,并确定目标存储池对应的目标分配规则组;利用CRUSH算法,基于所述分配规则组确定所述目标归置组PG对应的目标对象存储设备ODS,并将所述目标归置组PG分配至所述目标对象存储设备ODS。本申请中的每个存储池均配置有分配规则组,并且在确定目标归置组PG对应的目标对象存储设备ODS时,会根据该目标归置组PG对应的存储池对应给的目标分配规则组来确定,这样可以为服务场景不同的存储池配置不同的分配规则组,使得分配至该存储池的归置组可以合适的目标对象存储设备ODS,提高了归置组PG分配的灵活性。

技术领域

本申请涉及分布式数据存储技术领域,特别涉及一种归置组分配方法、装置以及分布式存储系统。

背景技术

Ceph(赛弗)集群是一种分布式存储系统,其以优异的性能以及良好的伸缩性著称。在生产环境中,集群的规模可能会相当庞大,容纳着数以千计的对象存储设备ODS,并且通过创建不同的存储池,来为不同的应用、不同的用户以及不同的接口形式提供着存储服务。不同的存储池所服务的目标不同,从而会通过给不同的存储池绑定不同的CRUSH rule来划分对象存储设备。但是,由于存储设备的类型、容量、以及性能可能各不相同,那么如何控制文件对象在各对象存储设备上的分布概率,以充分利用各对象存储设备成为亟待解决的技术问题。

发明内容

本申请要解决的技术问题在于,针对现有技术的不足,提供一种归置组分配方法、装置以及分布式存储系统。

为了解决上述技术问题,本申请实施例第一方面提供了一种归置组分配方法,其应用于分布式存储系统Ceph集群中的监视器,所述Ceph集群包括若干存储池,并且若干存储池中的每个存储池均对应一分配规则组;所述方法包括:

获取目标归置组PG对应的目标存储池,并确定所述目标存储池对应的目标分配规则组,其中,所述目标分配规则组包括权重系数集,所述权重系数集包括各对象存储设备ODS各自对应的权重系数;

利用CRUSH算法,基于所述分配规则组确定所述目标归置组PG对应的目标对象存储设备ODS,并将所述目标归置组PG分配至所述目标对象存储设备ODS。

所述归置组分配方法,其中,所述若干存储池中至少存在第一存储池和第二存储池,第一存储池对应的分配规则组与第二存储池对应的分配规则组不同。

所述归置组分配方法,其中,所述若干存储池对应的所有分配规则组中包括一默认分配规则组,所述归置组分配方法还包括:

当Ceph集群新建存储池时,将所述默认分配规则组分配给该存储池。

所述归置组分配方法,其中,所述默认分配规则组为Ceph集群初始化时配置的,所述默认分配规则组中的权重系数集为Ceph集群的全局权重系数集。

所述归置组分配方法,其中,所述目标分配规则组包括CRUSH规则,所述利用CRUSH算法,基于所述分配规则组确定所述目标归置组PG对应的目标对象存储设备ODS具体包括:

读取所述目标分配规则组包括的CRUSH规则以及权重系数集;

基于权重系数集,利用CRUSH算法执行所述CRUSH规则以确定所述目标归置组PG对应的目标对象存储设备ODS。

所述归置组分配方法,其中,所述基于权重系数集,利用CRUSH算法执行所述CRUSH规则以确定所述目标归置组PG对应的目标对象存储设备ODS具体包括:

获取所述目标存储池的副本数;

将所述权重系数集及所述副本数作为CRUSH算法的输入项,根据所述CRUSH规则执行CRUSH算法以得到所述目标归置组PG对应的目标对象存储设备ODS。

下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。

该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于柏科数据技术(深圳)股份有限公司,未经柏科数据技术(深圳)股份有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服

本文链接:http://www.vipzhuanli.com/pat/books/202110149455.X/2.html,转载请声明来源钻瓜专利网。

×

专利文献下载

说明:

1、专利原文基于中国国家知识产权局专利说明书;

2、支持发明专利 、实用新型专利、外观设计专利(升级中);

3、专利数据每周两次同步更新,支持Adobe PDF格式;

4、内容包括专利技术的结构示意图流程工艺图技术构造图

5、已全新升级为极速版,下载速度显著提升!欢迎使用!

请您登陆后,进行下载,点击【登陆】 【注册】

关于我们 寻求报道 投稿须知 广告合作 版权声明 网站地图 友情链接 企业标识 联系我们

钻瓜专利网在线咨询

周一至周五 9:00-18:00

咨询在线客服咨询在线客服
tel code back_top