[发明专利]数据迁移方法、装置、计算机设备和存储介质

说明书

本申请涉及一种数据迁移方法、系统、计算机设备和存储介质。所述方法包括：查询中间数据库中是否存在未从源数据库导入至目标数据库的数据的当前索引；若存在，则从中间数据库获取与当前索引对应的未导入数据；将与当前索引对应的未导入数据导入目标数据库；获取与当前索引对应的未导入数据导入目标数据库的综合导入结果，并查询中间数据库中是否存在未从源数据库导入至目标数据库的新的数据的索引；若存在，则根据综合导入结果和新的数据的索引更新当前索引；根据从中间数据库中获取与更新后的当前索引对应的未导入数据，并将与更新后的当前索引对应的未导入数据导入目标数据库。采用本方法能够提高数据迁移的准确性。

技术领域

本申请涉及计算机技术领域，特别是涉及一种数据迁移方法、装置、计算机设备和存储介质。

背景技术

随着现代科技的发展，人们的生活越来越离不开数据，而我们日常所用的各种存储系统也是依托数据来执行各种功能，数据库管理得到越来越广泛的应用，而在使用数据库的过程中，由于系统的切换和对不同系统中数据的统计和筛选等需求，经常需要进行数据迁移。

在传统的数据迁移过程中，由于迁移数据的数量庞大，需要较长的迁移时间，而在此期间如果目标数据库或者迁移线路出现异常，则会导致数据丢失，造成数据迁移的不准确。

发明内容

基于此，有必要针对上述技术问题，提供一种能够提高数据迁移准确性的数据迁移方法、装置、计算机设备和存储介质。

一种数据迁移方法，所述方法包括：

查询中间数据库中是否存在未从源数据库导入至目标数据库的数据的当前索引；若存在，则从所述中间数据库获取与所述当前索引对应的未导入数据；

将与所述当前索引对应的所述未导入数据导入所述目标数据库；

获取与所述当前索引对应的所述未导入数据导入所述目标数据库的综合导入结果，并查询所述中间数据库中是否存在未从源数据库导入至目标数据库的新的数据的索引；若存在，则根据所述综合导入结果和所述新的数据的索引更新所述当前索引；

根据从所述中间数据库中获取与更新后的所述当前索引对应的未导入数据，并将与更新后的所述当前索引对应的所述未导入数据导入目标数据库。

在其中一个实施例中，所述将与所述当前索引对应的所述未导入数据导入所述目标数据库，包括：

按照预设分批逻辑将与所述当前索引对应的所述未导入数据进行分批处理；

将分批处理后的所述未导入数据分批导入所述目标数据库；

所述获取与所述当前索引对应的所述未导入数据导入所述目标数据库的综合导入结果，包括：

获取每一批所述未导入数据导入所述目标数据库的批次导入结果，并根据所述批次导入结果得到综合导入结果。

在其中一个实施例中，所述将与更新后的所述当前索引对应的所述未导入数据导入目标数据库，包括：

统计与更新后的所述当前索引对应的所述未导入数据的条数，当与更新后的所述当前索引对应的所述未导入数据的条数大于0且小于预设条数时，将所述更新后的当前索引清空；

将与更新后的所述当前索引对应的所述未导入数据导入到目标数据库中。

在其中一个实施例中，所述将与更新后的所述当前索引对应的所述未导入数据导入目标数据库，包括：

统计与更新后的所述当前索引对应的所述未导入数据的条数，当与更新后的所述当前索引对应的所述未导入数据的条数大于等于预设条数时，将与更新后的所述当前索引对应的所述未导入数据导入到所述目标数据库中，并获取与更新后的所述当前索引对应的所述未导入数据导入到所述目标数据库后的综合导入结果后；继续查询所述中间数据库中是否存在未从源数据库导入至目标数据库的新的数据的索引。