[发明专利]一种存储集群的扩容方法、系统及相关装置有效

专利信息
申请号: 202011311240.5 申请日: 2020-11-20
公开(公告)号: CN112463043B 公开(公告)日: 2023-01-10
发明(设计)人: 孙润宇;孟祥瑞 申请(专利权)人: 苏州浪潮智能科技有限公司
主分类号: G06F3/06 分类号: G06F3/06
代理公司: 北京集佳知识产权代理有限公司 11227 代理人: 高勇
地址: 215100 江苏省苏州市吴*** 国省代码: 江苏;32
权利要求书: 查看更多 说明书: 查看更多
摘要:
搜索关键词: 一种 存储 集群 扩容 方法 系统 相关 装置
【说明书】:

本申请提供一种存储集群的扩容方法,包括:接收扩容指令,并确定所述扩容指令对应的新扩容节点;遍历所有放置组,确定各所述放置组对应OSD的引用计数;每个OSD的引用计数与其承载的放置组数量相同;将每个放置组中引用计数最大的OSD置为待确定OSD;调用数据分布接口从所述新扩容节点中选择最优OSD替换所述待确定OSD。本申请使得每个放置组中引用技术最大的OSD只会被替换为新扩容节点中的OSD,杜绝了旧节点内部之间的数据迁移,从而提高扩容重构效率,降低系统进行扩容时的资源使用率,提高存储系统性能。本申请还提供一种存储集群的扩容系统、计算机可读存储介质和存储设备,具有上述有益效果。

技术领域

本申请涉及数据存储领域,特别涉及一种存储集群的扩容方法、系统及相关装置。

背景技术

在分布式存储系统中,存储的内容按照固定大小切割,这一块固定大小的数据称为一个对象,PG(Placement Group,放置组,是用于放置对象的一个载体)就是多个对象的聚合。而每个PG与OSD(Object-based Storage Device,对象存储设备)的对应是通过数据分布算法对应起来的,一个PG对应于多个OSD,OSD可以简单理解为物理上的磁盘,一个OSD上可以有多个PG,存储的内容置于磁盘上。当进行节点扩容时,数据分布算法会通过一系列的计算去给所有PG重新选择OSD,选择完成后,对于该PG中新加入的OSD成员需要进行数据迁移,但在执行数据迁移过程中容易存在某PG重新选择成员后新加入的成员依然是老节点的OSD,但是由于该OSD上没有该PG的数据,所以也需要进行数据迁移,这样在扩容时就存在额外迁移量,不仅占用了系统资源,同时降低了扩容效率。

发明内容

本申请的目的是提供一种存储集群的扩容方法、存储集群的扩容系统、计算机可读存储介质和存储设备,能够提高扩容效率。

为解决上述技术问题,本申请提供一种存储集群的扩容方法,具体技术方案如下:

接收扩容指令,并确定所述扩容指令对应的新扩容节点;

遍历所有放置组,确定各所述放置组对应OSD的引用计数;每个OSD的引用计数与其承载的放置组数量相同;

将每个放置组中引用计数最大的OSD置为待确定OSD;

调用数据分布接口从所述新扩容节点中选择最优OSD替换所述待确定OSD。

可选的,调用数据分布接口从所述新扩容节点中选择最优OSD替换所述待确定OSD之后,还包括:

判断所述最优OSD和所述待确定OSD是否属于相同故障域;

若是,则拒绝利用所述最优OSD替换所述待确定OSD;

若否,则利用所述最优OSD替换所述待确定OSD。

可选的,调用数据分布接口从所述新扩容节点中选择最优OSD替换所述待确定OSD包括:

调用预设哈希算法对所述新扩容节点中每个扩容节点作哈希计算;

在哈希值最大的扩容节点中确定哈希值最大的新OSD作为所述最优OSD;

利用所述最优OSD替换所述待确定OSD。

可选的,在哈希值最大的扩容节点中确定哈希值最大的新OSD作为所述最优OSD包括:

在哈希值最大的扩容节点中分别基于尝试次数、OSD名称和OSD权重计算各OSD对应的哈希值。

将哈希值最大的OSD作为最优OSD。

可选的,利用所述最优OSD替换所述待确定OSD之后,还包括:

变更OSD的引用计数。

可选的,确定所述扩容指令对应的新扩容节点之后,还包括:

下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。

该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于苏州浪潮智能科技有限公司,未经苏州浪潮智能科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服

本文链接:http://www.vipzhuanli.com/pat/books/202011311240.5/2.html,转载请声明来源钻瓜专利网。

×

专利文献下载

说明:

1、专利原文基于中国国家知识产权局专利说明书;

2、支持发明专利 、实用新型专利、外观设计专利(升级中);

3、专利数据每周两次同步更新,支持Adobe PDF格式;

4、内容包括专利技术的结构示意图流程工艺图技术构造图

5、已全新升级为极速版,下载速度显著提升!欢迎使用!

请您登陆后,进行下载,点击【登陆】 【注册】

关于我们 寻求报道 投稿须知 广告合作 版权声明 网站地图 友情链接 企业标识 联系我们

钻瓜专利网在线咨询

周一至周五 9:00-18:00

咨询在线客服咨询在线客服
tel code back_top