[发明专利]数据同步的方法和系统

权利要求书

1.一种数据同步的方法，其中，包括：

通过用户客户端创建同步任务，并配置任务信息；

根据同步任务的任务信息，从源数据库中获取Binlog信息，并写入缓存数据库；

从缓存数据库中读取所述Binlog信息，将所述的Binlog信息解析为数据记录信息，并将所述数据写入目标数据库；

其中，若从源数据库中获取Binlog信息出现异常，则将所述同步任务的执行状态变更为中断状态；若从缓存数据库中读取所述Binlog信息，将所述的Binlog信息解析为数据记录信息，并将所述数据写入目标数据库出现异常，则将所述同步任务的执行状态变更为中断状态；

其中，定时获取所述同步任务的最新执行状态，当从缓存数据库中读取所述Binlog信息，将所述的Binlog信息解析为数据记录信息，并将所述数据写入目标数据库这一过程出现异常而使所述执行状态为中断状态时，中断从源数据库中获取Binlog信息；

当从源数据库中获取Binlog信息出现异常而使所述执行状态为中断状态时，持续从缓存数据库中读取所述Binlog信息，将所述的Binlog信息解析为数据记录信息，并将所述数据写入目标数据库，直到处理完所有的Binlog信息；

其中，从缓存数据库中读取所述Binlog信息时记录操作位点，当所述同步任务发生中断再启动时，从所述位点继续数据的同步。

2.如权利要求1所述的数据同步的方法，其中，从源数据库中读取Binlog信息具体包括：

通过作为伪从库的Binlog模块向源数据库发送bump请求获取binlog信息。

3.如权利要求1所述的数据同步的方法，其中，所述任务信息包括增量同步方式，全量同步方式或自定义同步方式；

对应地，所述从源数据库中获取的Binlog信息分别对应当前时间之后的数据，当前时间之前的历史数据和之后的数据，或自定义时间区间内的数据。

4.如权利要求1所述的数据同步的方法，其中，所述从所述位点继续数据的同步的步骤包括：

读取所述位点信息，根据所述位点信息和任务信息，获取与所述位点信息对应的源数据库时间戳；

从所述缓存数据库中实时读取时间戳之后的Binlog信息，将所述的Binlog信息解析为数据记录信息，并将所述数据写入目标数据库；

以SQL读写方式将所述时间戳之前的数据同步到目标数据库。

5.如权利要求1所述的数据同步的方法，其中，所述的任务信息包括任务的起止时间点，以所述同步任务的开始时间和结束时间作为一个时间区间，校验所述时间区间同步的数据。

6.如权利要求5所述的数据同步的方法，其中，校验所述时间区间同步的数据具体包括：

将所述时间区间划分为多个时间片断；

分别获取对应时间片断的源数据库数据和对应的目标数据库数据，并进行对比；

向用户返回数据对比结果。

7.如权利要求6所述的数据同步的方法，其中，在所述对比结果中，如果目标数据库数据与对应的源数据库数据有差异，创建并执行相应的数据补录任务。