[发明专利]一种多模型数据的同步方法及装置

权利要求书

1.一种多模型数据的同步方法，其特征在于，所述方法包括：

扫描待同步数据库中的待同步任务；

对所述待同步任务进行拆解，得到所述待同步任务对应的任务列表清单，其中，所述任务列表清单包括至少一个任务，每个所述任务包括至少一个数据表；

按照预设顺序将所述任务列表清单中的数据从所述待同步数据库同步到至少一个目标数据库中。

2.根据权利要求1所述的多模型数据的同步方法，其特征在于，所述按照预设顺序将所述任务列表清单中的数据从所述待同步数据库同步到至少一个目标数据库中，包括：

按照串行方式将所述任务列表清单中的任务从所述待同步数据库同步到至少一个目标数据库中；

在将所述任务列表清单中的任一任务从所述待同步数据库同步到所有所述目标数据库的过程中，按照并行方式将该任务包括的数据表中的数据从所述待同步数据库同步到所有所述目标数据库中。

3.根据权利要求2所述的多模型数据的同步方法，其特征在于，所述扫描待同步数据库中的待同步任务之前，所述方法还包括：

读取待同步数据库的配置项，所述配置项包括数据同步频率和线程，且所述配置项是根据所述待同步数据库的业务类型和/或数据量级确定的；

其中，所述扫描待同步数据库中的待同步任务，包括：

根据所述配置项定时扫描待同步数据库中的待同步任务。

4.根据权利要求3所述的多模型数据的同步方法，其特征在于，所述对所述待同步任务进行拆解，得到所述待同步任务对应的任务列表清单，包括：

以多线程方式对所述待同步任务中的每个任务进行拆解，得到所述待同步任务对应的任务列表清单；

其中，所述对所述待同步任务进行拆解，得到所述待同步任务对应的任务列表清单之后，所述方法还包括：

将所述任务列表清单转换成能够被执行的SQL语句。

5.根据权利要求1-4任一项所述的多模型数据的同步方法，其特征在于，所述方法还包括：

判断所述任务列表清单中的已写入任务是否存在对应的外部事务，所述已写入任务包括所述任务列表清单中已同步至所有所述目标数据库的任务；

当判断出所述已写入任务存在所述外部事务时，调用所述外部事务的接口，执行所述外部事务；

其中，所述执行所述外部事务之后，所述方法还包括：

对所述已写入任务标记用于表示所述外部事务已完成的任务完成标记。

6.根据权利要求5所述的多模型数据的同步方法，其特征在于，所述方法还包括：

根据所述任务列表清单中的任务同步情况，生成状态标记，其中，所述状态标记包括所述任务列表清单中任务的状态标记和数据表的状态标记；和/或，

根据所述任务列表清单中的任务同步情况，生成日志信息，其中，所述日志信息包括所述任务列表清单中任务的日志信息和数据表的日志信息。

7.根据权利要求6所述的多模型数据的同步方法，其特征在于，所述方法还包括：

获取所述任务列表清单对应的所有所述状态标记；

根据所有所述状态标记判断所述任务列表清单是否存在执行失败的任务和数据表；

当判断出存在执行失败的任务和数据表时，根据执行失败的任务和数据表确定补偿任务列表清单，其中，所述补偿任务列表清单包括至少一个执行失败的目标任务，每个所述目标任务包括至少一个数据表；

按照预设顺序将所述补偿任务列表清单中的数据从所述待同步数据库同步到所有所述目标数据库中。

8.一种多模型数据的同步装置，其特征在于，所述装置包括：

扫描模块，用于扫描待同步数据库中的待同步任务；

拆解模块，用于对所述待同步任务进行拆解，得到所述待同步任务对应的任务列表清单，其中，所述任务列表清单包括至少一个任务，每个所述任务包括至少一个数据表；

同步模块，用于按照预设顺序将所述任务列表清单中的数据从所述待同步数据库同步到至少一个目标数据库中。