[发明专利]异构数据库迁移及数据比对方法、装置、设备和存储介质

权利要求书

1.一种异构数据库迁移及数据比对方法，其特征在于，包括：

创建多级线程池，所述多级线程池包括父级线程池和子级线程池；

在所述父级线程池执行任务，根据分库分表策略，将第一数据库中的待导出数据进行分析，得到拆分条件和数据特征，并生成子任务；

在所述子级线程池执行所述子任务，根据所述拆分条件，将所述第一数据库的待导出数据导出；

将导出的数据进行转码，并导入对应的第二数据库中；

采用余弦相似度算法，将所述第一数据库导出的数据和所述第二数据库导入的数据进行对比和校正。

2.根据权利要求1所述的异构数据库迁移及数据比对方法，其特征在于，所述任务的状态包括：待导出状态、扫描中状态和完成导入状态中的一种；

所述子任务的状态包括：待拆分状态、拆分中状态、待导入状态、导入中状态、完成导入、确认中和完成确认状态中的一种。

3.根据权利要求2所述的异构数据库迁移及数据比对方法，其特征在于，在所述父级线程池执行任务，包括：

定期扫描导出任务表，查找到所述导出任务表中的待导出状态的任务；

将查找到的所述任务的状态修改为扫描中；

根据分库分表策略，将第一数据中的待导出数据进行分析，得到拆分条件和数据特征；

根据所述拆分条件和所述数据特征生成子任务；

将所述子任务插入拆分任务表，并将所述子任务的状态设置为待拆分状态；

对比和校正完成后，将所述任务的状态修改为扫描完成。

4.根据权利要求2所述的异构数据库迁移及数据比对方法，其特征在于，执行将所述第一数据库的待导出数据导出包括：

所述子级线程池扫描拆分任务表，查找到所述拆分任务表中的待拆分状态的子任务；

将查找到的所述子任务的状态修改为拆分中；

根据所述拆分条件，将所述第一数据库的待导出数据导出；

将导出数据的所述子任务的状态修改为待导入。

5.根据权利要求2所述的异构数据库迁移及数据比对方法，其特征在于，执行将导出的数据进行转码，并导入对应的第二数据库中，包括：

若拆分任务表中无待拆分状态的子任务，则所述子级线程池扫描所述拆分任务表，查找到所述拆分任务表中的待导入状态的子任务；

将查找到的所述子任务的状态修改为导入中；

将导出的数据进行转码，并导入对应的所述第二数据库中；

将导入完成的所述子任务的状态修改为完成导入。

6.根据权利要求2所述的异构数据库迁移及数据比对方法，其特征在于，执行将所述第一数据库导出的数据和所述第二数据库导入的数据进行对比和校正，包括：

若拆分任务表中无待导入状态的子任务，则所述子级线程池扫描所述拆分任务表，查找到所述拆分任务表中的完成导入状态的子任务；

将查找到的所述子任务的状态修改为确认中；

在所述第一数据库和所述第二数据库中查找到对应的数据模块；

计算所述第一数据库中的数据模块的特征向量，得到第一特征向量；计算所述第二数据库中的数据模块的特征向量，得到第二特征向量；

将所述第一特征向量和所述第二特征向量进行余弦相似度计算，得到所述第一数据库和所述第二数据库中数据模块的相似度；

若所述相似度满足相似度阈值的要求，则将所述子任务的状态修改为完成确认；

否则，逐条对比所述第一数据库和所述第二数据库中的数据模块，查找到需要补充导入的数据进行补充录入数据，并将所述子任务的状态修改为完成确认。

7.根据权利要求1所述的异构数据库迁移及数据比对方法，其特征在于，在创建多级线程池之前，还包括：

读取配置文件；

根据所述配置文件生成任务；

将所述任务写入导出任务表，并将所述任务的状态置为待导出。