[发明专利]基于单元化架构的数据迁移方法、装置及电子设备

说明书

本申请提供一种基于单元化架构的数据迁移方法、装置及电子设备，可用于分布式领域。该方法包括：基于单元化架构，在单元进行业务处理的过程中，监测第一机房中每一单元的数据量和流量；根据数据量和流量，将第一机房增加至少一个单元；获取每一单元中的每一数据分片的序号；并根据每一单元中的每一数据分片的序号，确定目标数据分片；将目标数据分片所对应的业务数据迁移至第一机房所增加的单元中。本申请的方法，可以减少整体数据迁移量，进而使得单元化架构下减少应用系统的停业时间，提高业务处理效率。

技术领域

本申请涉及分布式领域，尤其涉及一种基于单元化架构的数据迁移方法、装置及电子设备。

背景技术

单元化架构是指把单元作为部署的基本单位，在全站所有机房中部署数个单元，其中，任意一个单元都是一个能完成所有业务操作的自包含集合，每个单元能操作全量数据中的一部分数据，以进行业务处理。在单元化架构下，单元进行业务处理的过程中，随着时间的增长，数据越来越多或者越来越少时，需要对该单元化架构下机房中的单元数量作出调整，并进行数据迁移。

现有技术中，当数据增多或减少时，需新增或者减少单元数量，对现有的全部数据进行重新分片，再将数据分片和单元进行重新分配，再将数据分片对应的数据进行迁移处理。

但是上述方式中，对数据分片和单元进行重新分配时，整体数据迁移量增多，导致业务系统升级较慢，停业时间较长，进而增大业务系统业务处理压力。

发明内容

本申请提供一种基于单元化架构的数据迁移方法、装置及电子设备，用以解决因整体数据迁移量增多导致业务系统升级较慢的问题。

第一方面，本申请提供一种基于单元化架构的数据迁移方法，所述方法包括：

基于单元化架构，在单元进行业务处理的过程中，监测第一机房中每一所述单元的数据量和流量；其中，所述第一机房包括至少一个所述单元；所述数据量为当前时刻下每一所述单元所连接的数据库中的业务数据量；所述流量为当前时刻下每一所述单元所部署的业务系统的访问总量；

根据所述数据量和所述流量，将所述第一机房增加至少一个单元；

获取每一所述单元中的每一数据分片的序号；其中，每一所述数据分片为对所述数据库中的业务数据进行分片处理后得到的；并根据每一所述单元中的每一所述数据分片的序号，确定目标数据分片；其中，所述目标数据分片为需要进行迁移的数据分片；

将所述目标数据分片所对应的业务数据迁移至所述第一机房所增加的单元中。

一个示例中，根据所述数据量和所述流量，将所述第一机房增加至少一个单元，包括：

针对所述第一机房中每一所述单元，若监测到该单元的数据量大于或等于第一预设数据量，则为所述第一机房增加N个单元；其中，N为大于或者等于1的正整数；被增加了所述N个单元的第一机房中的单元总数小于或者等于第一参数所表征的数值；所述第一参数用于指示所述第一机房可包括的单元的最大数量。

一个示例中，根据所述数据量和所述流量，将所述第一机房增加至少一个单元，还包括：

若确定监测到每一所述单元的流量大于或者等于第一预设流量，则为所述第一机房增加M个单元；其中，M为大于或者等于1的正整数；被增加了所述M个单元的第一机房中的单元总数小于或者等于所述第一参数所表征的数值。

一个示例中，所述单元中包括至少一个数据集合，所述数据集合中包括P个数据分片，P为大于1的正整数；根据每一所述单元中的每一所述数据分片的序号，确定目标数据分片，包括：

针对每一所述单元，确定所述单元中的数据集合中的第P个数据分片和第P-1个数据分片，为目标数据分片；