[发明专利]一种存储系统的扩容方法和装置有效
申请号: | 201910494118.7 | 申请日: | 2019-06-05 |
公开(公告)号: | CN110333824B | 公开(公告)日: | 2022-10-25 |
发明(设计)人: | 李文达;邬沛君 | 申请(专利权)人: | 腾讯科技(深圳)有限公司 |
主分类号: | G06F3/06 | 分类号: | G06F3/06 |
代理公司: | 广州三环专利商标代理有限公司 44202 | 代理人: | 郝传鑫;贾允 |
地址: | 518057 广东省深圳*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 存储系统 扩容 方法 装置 | ||
本发明公开了一种存储系统的扩容方法和装置,所述方法包括:获得当前节点列表,所述当前节点列表为当前进行数据读写的节点的列表;获取待扩容节点,所述待扩容节点为新增的进行数据移动的临时节点;计算所述当前节点列表和所述待扩容节点的数据分布,以得到每个节点的数据存储的预测结果;根据所述预测结果,获得所述当前节点列表中的差值数据;将所述当前节点列表中的差值数据移动到所述待扩容节点中;同步所述待扩容节点的数据与所述当前节点列表的数据,以得到数据同步结果;根据所述数据同步结果,在存储系统中增加所述待扩容节点,以对存储系统进行扩容。所述方法的数据均衡速度快,数据可靠性高且对外部业务性能无影响。
技术领域
本发明涉及存储系统扩容领域,尤其涉及一种存储系统的扩容方法和装置。
背景技术
传统存储系统扩容时,将新的存储服务节点加入到存储系统,按照存储系统中一定算法进行数据均衡,向新增节点搬迁数据。由于该新增存储节点已经加入存储系统,在数据搬迁过程中同时对外部客户业务提供数据存储服务。
因此在进行数据均衡过程中,存储系统内部向新增的存储节点搬迁数据,该新增的存储节点作为数据接收端,占用掉该存储节点的大量硬盘存储、网络带宽、以及计算资源等,尤其是硬盘写入数据是最大瓶颈,最终导致该节点对客户业务服务能力降低,且扩容过程持续时间长,成为集群中的业务瓶颈节点。
为了保持扩容过程中业务性能不降低,通常采用限制向扩容节点搬迁数据速度来降低对业务的影响,但是这样会导致扩容时间增长,数据均衡过程中存储系统发生硬件故障的概率增大,从而增加数据可靠性风险。
发明内容
为了解决存储系统扩容时业务性能或扩容速度受到影响的问题,得到存储系统扩容时对外业务正常往来且扩容速度无需降低的技术效果,本发明提供了一种存储系统的扩容方法和装置。
一方面,本发明提供了一种存储系统的扩容方法,所述方法包括:
获得当前节点列表,所述当前节点列表为当前进行数据读写的节点的列表;
获取待扩容节点,所述待扩容节点为新增的进行数据移动的临时节点;
计算所述当前节点列表和所述待扩容节点的数据分布,以得到每个节点的数据存储的预测结果;
根据所述预测结果,获得所述当前节点列表中的差值数据;
将所述当前节点列表中的差值数据移动到所述待扩容节点中;
同步所述待扩容节点的数据与所述当前节点列表的数据,以得到数据同步结果;
根据所述数据同步结果,在存储系统中增加所述待扩容节点,以对存储系统进行扩容。
另一方面提供了一种存储系统的扩容装置,所述装置包括:当前节点列表获得模块、待扩容节点获得模块、分布结果计算模块、差值数据移动模块、数据同步模块和系统扩容模块;
所述当前节点列表获得模块用于获得当前节点列表,所述当前节点列表为当前进行数据读写的节点列表;
所述待扩容节点获得模块用于获取待扩容节点,所述待扩容节点为新增的进行数据移动的临时节点;
所述分布结果计算模块用于计算所述当前节点列表和所述待扩容节点的数据分布,以得到每个节点的数据分布的预测结果;
所述差值数据移动模块用于根据所述预测结果,移动当前节点列表中的差值数据到待扩容节点;
所述数据同步模块用于同步所述待扩容节点的数据与所述当前节点列表的数据,以得到数据同步结果;
所述系统扩容模块用于根据所述数据同步结果,将所述待扩容节点加入到存储系统中,以对存储系统进行扩容。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于腾讯科技(深圳)有限公司,未经腾讯科技(深圳)有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201910494118.7/2.html,转载请声明来源钻瓜专利网。
- 上一篇:基于nbd设备的数据迁移方法、装置、设备及存储介质
- 下一篇:存储系统