[发明专利]存储集群之间的数据分区切换

说明书

一个示例提供了将数据分区从第一存储集群迁移到第二存储集群的方法，方法包括确定数据分区满足用于从第一存储集群迁移到第二存储集群的迁移标准；在第一存储集群上，准备要被转移的分区元数据，该分区元数据描述数据分区内的一个或多个流和每个流内的一个或多个范围；将分区元数据从第一存储集群转移到第二存储集群；将与数据分区相关联的新事务引导到第二存储集群，包括当一个或多个范围驻留在第一存储集群处时；在第一存储集群上，将数据分区内的一个或多个范围的访问属性更改为只读；以及在第二存储集群上，执行针对数据分区的新进入。

背景技术

分布式存储系统的客户可以使用存储账户，以将其数据存储在分布式存储系统中。分布式存储系统的特定地理区域可以包括一个或多个数据中心建筑物，并且每个数据中心建筑物可以包括多个存储集群。存储集群是运行公共分布式软件的服务器(节点)的集合(例如，软件服务的集合)。每个存储集群服务多个(例如，几百到几千个)存储账户和相关联事务，该存储账户和相关联事务利用节点中的每个节点上的中央处理单元(CPU)资源。

分布式存储系统可能出于各种原因将存储账户从一个存储集群迁移到另一存储集群(诸如，减轻存储集群中的容量压力)，以平衡区域内的存储集群当中的CPU和每秒输入/输出操作(IOPS)和/或将存储集群停止运作。进一步地，如果实时站点正在存储集群上运行，那么分布式存储系统可以将一些受影响的存储账户迁移到另一存储集群。

发明内容

提供本发明内容以简化形式介绍概念的选择，这些概念将在下面的具体实施方式中进一步描述。本发明内容不旨在标识所要求保护的主题的关键特征或基本特征，也不旨在用于限制所要求保护的主题的范围。进一步地，所要求保护的主题不限于解决在本公开的任何部分中所指出的任何或所有缺点的实施方式。

公开了涉及分布式计算系统中的数据迁移的示例。一个示例提供了一种在计算系统上制定的、将数据分区从第一存储集群迁移到第二存储集群的方法。每个存储集群可以经由一个或多个服务器计算机而被实现。方法包括确定数据分区满足用于从第一存储集群迁移到第二存储集群的迁移标准；在第一存储集群上，准备要被转移的分区元数据，分区元数据描述数据分区内的一个或多个流和每个流内的一个或多个范围；将分区元数据从第一存储集群转移到第二存储集群；将与数据分区相关联的新事务引导到第二存储集群，包括当一个或多个范围驻留在第一存储集群处时；在第一存储集群上，将数据分区内的一个或多个范围的访问属性更改为只读；以及在第二存储集群上，执行针对数据分区的新进入。

附图说明

图1示意性地示出了用于实现分布式存储系统的示例计算环境。

图2示意性地示出了在分区切换之前源存储集群和目的地存储集群的状态。

图3示意性地示出了分区切换的准备阶段的方面。

图4示意性地示出了分区切换的切换阶段的方面。

图5示意性地示出了存储集群组当中的资源平衡的方面。

图6示意性地示出了并行迁移到多个目的地存储集群的方面。

图7示出了图示将数据分区从第一存储集群迁移到第二存储集群的示例方法的流程图。

图8示出了图示示例计算系统的框图。

具体实施方式

图1示出了包含分布式存储系统102的示例计算环境100。数据被存储在存储标记(“stamp”)104和106中，其中每个存储标记(在本文中也被称为“存储集群”)是N个存储节点机架的集群，并且其中每个机架都被构建为具有冗余网络和电源的单独的故障域。