[发明专利]数据迁移方法、装置、系统、电子设备以及可读存储介质

说明书

本发明实施例提供一种数据迁移方法、装置、系统、电子设备以及可读存储介质，旨在在不明显增加业务处理复杂度的条件下，顺利完成数据迁移。其中，数据迁移方法包括：将源端数据库中的待迁移数据分批次地写入目标端数据库，其中，当一个批次的待迁移数据成功写入所述目标端数据库后，记录该批次待迁移数据的任务状态信息；针对已经写入所述目标端数据库的数据，分批次地删除所述源端数据库中与该数据对应的待迁移数据，其中，当一个批次的待迁移数据被成功删除后，更新该批次待迁移数据的任务状态信息；在产生数据读取任务的情况下，根据待读取数据对应的任务状态信息，确定记录有所述待读取数据的数据库，并从该数据库读取所述待读取数据。

技术领域

本发明涉及信息技术领域，特别是涉及一种数据迁移方法、装置、系统、电子设备以及可读存储介质。

背景技术

随着信息技术的发展，越来越多的企业开始借助数据库存储和管理数据。以互联网企业为例，其服务端通常需要借助数据库集群存储大量数据，例如商品信息、音视频数据、用户画像、用户历史浏览记录、用户订单数据等等。并且随着用户数量的增加和服务时间的累积，数据量也进一步积累。

通常，数据库集群中包括多个数据库，不同数据库之间因各种各样的原因而存在数据迁移的需求。例如有的数据库的访问量较高，有的数据库的访问量较低，当访问量较高的数据库的可用容量即将耗尽时，通常需要将该数据库中的部分或全部数据迁移至访问量较低的数据库，以确保该数据库的可用容量不低于可用容量下限。然而数据的迁移将导致业务(线上或线下业务)受到影响。为便于理解，假设某数据库用于存储用户订单数据，当把该数据库中4个月以前的用户订单数据迁移至其他数据库后，在用户终端发送订单查看请求，业务服务器需要读取最近6个月的订单数据时，将不能从该数据库中顺利获取到完整的订单数据，而仅能读取到最近2个月的订单数据，导致数据读取不成功。相关技术中，为了能顺利获取到完整订单数据，则必须对业务代码进行更改，然而这又显著增加了业务处理的复杂度，降低了数据读取效率。

发明内容

本发明实施例的目的在于提供一种数据迁移方法、装置、系统、电子设备以及可读存储介质，旨在在不明显增加业务处理复杂度的条件下，顺利完成数据迁移。具体技术方案如下：

在本发明实施例的第一方面，提供了一种数据迁移方法，所述方法包括：

在产生数据迁移任务的情况下，将源端数据库中的待迁移数据分批次地写入目标端数据库，其中，当一个批次的待迁移数据成功写入所述目标端数据库后，记录该批次待迁移数据的任务状态信息，该任务状态信息表征该批次待迁移数据已经写入所述目标端数据库；

针对已经写入所述目标端数据库的数据，分批次地删除所述源端数据库中与该数据对应的待迁移数据，其中，当一个批次的待迁移数据被成功删除后，更新该批次待迁移数据的任务状态信息，更新后的任务状态信息表征该批次待迁移数据已经从所述源端数据库删除；

在产生数据读取任务的情况下，读取待读取数据对应的任务状态信息，并根据所述任务状态信息，从所述源端数据库和所述目标端数据库中确定记录有所述待读取数据的数据库，并从该数据库读取所述待读取数据。

在本发明实施例的第二方面，提供了一种数据迁移装置，所述装置包括：

数据写入模块，用于在产生数据迁移任务的情况下，将源端数据库中的待迁移数据分批次地写入目标端数据库，其中，当一个批次的待迁移数据成功写入所述目标端数据库后，记录该批次待迁移数据的任务状态信息，该任务状态信息表征该批次待迁移数据已经写入所述目标端数据库；

数据删除模块，用于针对已经写入所述目标端数据库的数据，分批次地删除所述源端数据库中与该数据对应的待迁移数据，其中，当一个批次的待迁移数据被成功删除后，更新该批次待迁移数据的任务状态信息，更新后的任务状态信息表征该批次待迁移数据已经从所述源端数据库删除；