[发明专利]数据迁移方法、系统、计算设备及存储介质

说明书

本发明公开了一种数据迁移方法、系统、计算设备及存储介质，该方法包括：配置中心创建任务配置，对任务配置进行初始化生成初始化数据，并创建迁移任务，将初始化数据和迁移任务的迁移任务详情同步至监控中心；监控中心将接收到的初始化数据和迁移任务详情记录至监控数据表中；执行迁移任务，将迁移任务对应的目标数据从源数据库迁移到目标数据库，并实时将迁移任务的执行进度通知监控中心，以供监控中心对监控数据表进行更新；监控中心根据监控数据表确定迁移任务的执行结果，并通过布隆过滤器进行迁移数据的完整性校验。该方案在提高数据迁移效率的同时并保障了数据完整性，解决了现有数据迁移方案效率低下且业务系统必须停机时间很长等痛点。

技术领域

本发明涉及数据库迁移领域，具体涉及一种数据迁移方法、系统、计算设备及存储介质。

背景技术

在现有技术中，因为业务需求等原因，经常需要进行数据迁移，例如在系统数据库扩容改造时进行数据迁移，系统之间数据迁移，异构数据库间数据迁移，或者系统数据定期全量备份等。然而现有的数据迁移方案至少存在以下几点问题：(1)在迁移数据时，为了避免原数据被更新或者产生新数据而导致迁移前后数据不一致，原业务系统需要停止相应的服务，一般需要停服几十分钟甚至数小时之久；(2)业务系统数据模型个性化很强，每次迁移数据都要投入大量研发工作重复建设，任务繁琐复杂，容易出错；(3)数据迁移效率低下，无法满足存在大量数据需要迁移的迁移场景。

发明内容

鉴于上述问题，提出了本发明以便提供一种克服上述问题或者至少部分地解决上述问题的数据迁移方法、系统、计算设备及存储介质。

根据本发明的一个方面，提供了一种数据迁移方法，该方法包括：

配置中心创建任务配置，对任务配置进行初始化生成初始化数据，并创建迁移任务，将初始化数据和迁移任务的迁移任务详情同步至监控中心；

监控中心将接收到的初始化数据和迁移任务详情记录至监控数据表中；

执行迁移任务，将迁移任务对应的目标数据从源数据库迁移到目标数据库，并实时将迁移任务的执行进度通知监控中心，以供监控中心对监控数据表进行更新；

监控中心根据监控数据表确定迁移任务的执行结果，并通过布隆过滤器进行迁移数据的完整性校验。

根据本发明的另一方面，提供了一种数据迁移系统，该系统包括：配置中心、监控中心以及执行模块；其中，

配置中心用于：创建任务配置，对任务配置进行初始化生成初始化数据，并创建迁移任务，将初始化数据和迁移任务的迁移任务详情同步至监控中心；

监控中心用于：将接收到的初始化数据和迁移任务详情记录至监控数据表中；

执行模块用于：执行迁移任务，将迁移任务对应的目标数据从源数据库迁移到目标数据库，并实时将迁移任务的执行进度通知监控中心，以供监控中心对监控数据表进行更新；

监控中心进一步用于：根据监控数据表确定迁移任务的执行结果，并通过布隆过滤器进行迁移数据的完整性校验。

根据本发明的又一方面，提供了一种计算设备，包括：处理器、存储器、通信接口和通信总线，处理器、存储器和通信接口通过通信总线完成相互间的通信；

存储器用于存放至少一可执行指令，可执行指令使处理器执行上述数据迁移方法对应的操作。

根据本发明的再一方面，提供了一种计算机存储介质，存储介质中存储有至少一可执行指令，可执行指令使处理器执行如上述数据迁移方法对应的操作。