[发明专利]一种存储集群的扩容方法、系统及相关装置有效
申请号: | 202011311240.5 | 申请日: | 2020-11-20 |
公开(公告)号: | CN112463043B | 公开(公告)日: | 2023-01-10 |
发明(设计)人: | 孙润宇;孟祥瑞 | 申请(专利权)人: | 苏州浪潮智能科技有限公司 |
主分类号: | G06F3/06 | 分类号: | G06F3/06 |
代理公司: | 北京集佳知识产权代理有限公司 11227 | 代理人: | 高勇 |
地址: | 215100 江苏省苏州市吴*** | 国省代码: | 江苏;32 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 存储 集群 扩容 方法 系统 相关 装置 | ||
本申请提供一种存储集群的扩容方法,包括:接收扩容指令,并确定所述扩容指令对应的新扩容节点;遍历所有放置组,确定各所述放置组对应OSD的引用计数;每个OSD的引用计数与其承载的放置组数量相同;将每个放置组中引用计数最大的OSD置为待确定OSD;调用数据分布接口从所述新扩容节点中选择最优OSD替换所述待确定OSD。本申请使得每个放置组中引用技术最大的OSD只会被替换为新扩容节点中的OSD,杜绝了旧节点内部之间的数据迁移,从而提高扩容重构效率,降低系统进行扩容时的资源使用率,提高存储系统性能。本申请还提供一种存储集群的扩容系统、计算机可读存储介质和存储设备,具有上述有益效果。
技术领域
本申请涉及数据存储领域,特别涉及一种存储集群的扩容方法、系统及相关装置。
背景技术
在分布式存储系统中,存储的内容按照固定大小切割,这一块固定大小的数据称为一个对象,PG(Placement Group,放置组,是用于放置对象的一个载体)就是多个对象的聚合。而每个PG与OSD(Object-based Storage Device,对象存储设备)的对应是通过数据分布算法对应起来的,一个PG对应于多个OSD,OSD可以简单理解为物理上的磁盘,一个OSD上可以有多个PG,存储的内容置于磁盘上。当进行节点扩容时,数据分布算法会通过一系列的计算去给所有PG重新选择OSD,选择完成后,对于该PG中新加入的OSD成员需要进行数据迁移,但在执行数据迁移过程中容易存在某PG重新选择成员后新加入的成员依然是老节点的OSD,但是由于该OSD上没有该PG的数据,所以也需要进行数据迁移,这样在扩容时就存在额外迁移量,不仅占用了系统资源,同时降低了扩容效率。
发明内容
本申请的目的是提供一种存储集群的扩容方法、存储集群的扩容系统、计算机可读存储介质和存储设备,能够提高扩容效率。
为解决上述技术问题,本申请提供一种存储集群的扩容方法,具体技术方案如下:
接收扩容指令,并确定所述扩容指令对应的新扩容节点;
遍历所有放置组,确定各所述放置组对应OSD的引用计数;每个OSD的引用计数与其承载的放置组数量相同;
将每个放置组中引用计数最大的OSD置为待确定OSD;
调用数据分布接口从所述新扩容节点中选择最优OSD替换所述待确定OSD。
可选的,调用数据分布接口从所述新扩容节点中选择最优OSD替换所述待确定OSD之后,还包括:
判断所述最优OSD和所述待确定OSD是否属于相同故障域;
若是,则拒绝利用所述最优OSD替换所述待确定OSD;
若否,则利用所述最优OSD替换所述待确定OSD。
可选的,调用数据分布接口从所述新扩容节点中选择最优OSD替换所述待确定OSD包括:
调用预设哈希算法对所述新扩容节点中每个扩容节点作哈希计算;
在哈希值最大的扩容节点中确定哈希值最大的新OSD作为所述最优OSD;
利用所述最优OSD替换所述待确定OSD。
可选的,在哈希值最大的扩容节点中确定哈希值最大的新OSD作为所述最优OSD包括:
在哈希值最大的扩容节点中分别基于尝试次数、OSD名称和OSD权重计算各OSD对应的哈希值。
将哈希值最大的OSD作为最优OSD。
可选的,利用所述最优OSD替换所述待确定OSD之后,还包括:
变更OSD的引用计数。
可选的,确定所述扩容指令对应的新扩容节点之后,还包括:
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于苏州浪潮智能科技有限公司,未经苏州浪潮智能科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202011311240.5/2.html,转载请声明来源钻瓜专利网。
- 上一篇:一种电力检修接线设备
- 下一篇:一种FCC装置的预提升系统和工艺