[发明专利]一种海量存储系统快速均衡方法及装置

说明书

本发明公开了一种海量存储系统快速均衡方法及装置，该方法包括：基于初始的第一预定数量的物理节点划分出第一预定数量的逻辑节点，其中，所述物理节点中设置有初始的第二预定数量的物理磁盘；在扩容或缩容后的均衡过程中，优先在所述逻辑节点间对数据进行均衡；完成所述逻辑节点间的数据均衡后，若逻辑节点内的数据不均衡，则对存在数据不均衡的逻辑节点进行节点内数据均衡。本发明降低了存储系统进行均衡时带给存储网络和存储节点的压力。

技术领域

本发明涉及存储技术领域，特别涉及一种海量存储系统快速均衡方法及装置。

背景技术

近几年，随着互联网网络规模不断扩大，新兴应用以及边缘计算、物联网、大数据分析、实时分析，每天都有海量数据需要存储，数据存储成为各大软件设计热点话题，由于存储数据量大，所以需要高性能存储。现有一般使用存储系统的是分布式存储系统，在分布式存储系统中保证数据均衡分布是存储提供高性能的有效方式。然而，软件在设计之初不能很好地预估数据量，一般情况都会面临存储容量的扩容，个别情况还有可能出现缩容，前述扩容和缩容都会引起存储节点相关磁盘的数据进行均衡，均衡会增加存储网络和存储节点的压力，所以存储系统的均衡需要尽可能降低存储网络和存储节点的压力。

发明内容

本说明书实施例提供了一种海量存储系统快速均衡方法及装置。

一方面，本说明书实施例提供的一种海量存储系统快速均衡方法，包括：基于初始的第一预定数量的物理节点划分出第一预定数量的逻辑节点，其中，所述物理节点中设置有初始的第二预定数量的物理磁盘；在扩容或缩容后的均衡过程中，优先在所述逻辑节点间对数据进行均衡；完成所述逻辑节点间的数据均衡后，若逻辑节点内的数据不均衡，则对存在数据不均衡的逻辑节点进行节点内数据均衡。

另一方面，本说明书实施例提供的一种海量存储系统快速均衡装置，包括：逻辑节点划分模块，用于基于初始的第一预定数量的物理节点划分出第一预定数量的逻辑节点，其中，所述物理节点中设置有初始的第二预定数量的物理磁盘；逻辑节点间数据均衡模块，用于在扩容或缩容后的均衡过程中，优先在所述逻辑节点间对数据进行均衡；逻辑节点内数据均衡模块，用于对存在数据不均衡的逻辑节点进行节点内数据均衡。

本发明实施例降低了存储系统进行快速均衡时带给存储网络和存储节点的压力。

附图说明

图1为本说明书一些实施例的海量存储系统快速均衡方法的流程图。

图2为本说明书一些实施例的海量存储系统快速均衡装置的组成图。

图3为本说明书一些实施例的初始存储系统的分布图。

图4为图3中的初始存储系统在扩容三个物理节点后的分布图。

图5为图4中的存储系统的部分磁盘迁移后的分布图。

图6为图5中的存储系统增加物理磁盘后的分布图。

具体实施方式

为了使本技术领域的人员更好地理解本说明书中的技术方案，下面将结合本说明书实施例中的附图，对本说明书实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本说明书一部分实施例，而不是全部的实施例。基于本说明书中的实施例，本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例，都应当属于本说明书保护的范围。

如图1所示，本说明书一些实施例中提供了一种海量存储系统快速均衡方法，包括基于初始的第一预定数量的物理节点划分出第一预定数量的逻辑节点，其中，所述物理节点中设置有初始的第二预定数量的物理磁盘；在扩容或缩容后的均衡过程中，优先在所述逻辑节点间对数据进行均衡；完成所述逻辑节点间的数据均衡后，若逻辑节点内的数据不均衡，则对存在数据不均衡的逻辑节点进行节点内数据均衡。