[发明专利]一种查询建表事务的拆分同步方法及系统

权利要求书

1.一种查询建表事务的拆分同步方法，其特征在于，包括以下步骤：

步骤S1、捕获源数据库中的查询建表事务的事务日志,查询建表具体指：使用查询建表方式创建目标数据表的同时，使用基表数据来初始化新建的表；

步骤S2、将所述事务日志中的DDL信息拆分出来，投递所述DDL信息，执行所述DDL信息的同步操作；

步骤S3、将所述事务日志中的插入操作日志拆分成多个子事务日志，投递所有所述子事务日志，并行执行所有所述子事务日志的同步操作；

所述步骤S1具体为：

步骤S11、捕获查询建表事务的开始事务日志；

步骤S12、捕获查询建表事务的下一条事务日志，并进行缓存；

步骤S13、判断当前捕获的事务日志是否为提交日志，如果是则转步骤S2，否则转步骤S12；

所述步骤S3具体包括：

步骤S31、依次提取设定数量的插入操作日志，并将设定数量的插入操作日志与一个提交日志打包成一个子事务日志，发送所述子事务日志；

步骤S32、接收所述子事务日志并进行缓存；

步骤S33、判断所述子事务日志中是否包含查询建表事务的提交日志，如果是则唤醒多个线程并行执行所有所述子事务日志的同步操作，否则转步骤S31。

2.根据权利要求1所述的查询建表事务的拆分同步方法，其特征在于，所述步骤S2具体为：

步骤S21、发送拆分出的所述DDL信息；

步骤S22、接收所述DDL信息，执行所述DDL信息的同步操作。

3.根据权利要求1所述的查询建表事务的拆分同步方法，其特征在于，所述步骤S3还包括，为所述子事务日志设置事务ID，所述子事务日志的事务ID通过所述查询建表事务的事务ID执行设定算法后得到。

4.根据权利要求3所述的查询建表事务的拆分同步方法，其特征在于，所述设定算法包括：

存储所述查询建表事务的事务ID，选取所述查询建表事务的事务ID的部分字节作为递增位，对所述递增位进行清零，每拆分一个所述子事务日志，就对所述递增位执行一次加1的递增操作，作为当前拆分的子事务日志的事务ID。

5.一种查询建表事务的拆分同步系统，其特征在于，包括源端同步进程和目标端同步进程；

所述源端同步进程用于捕获源数据库中的查询建表事务的事务日志，将所述事务日志中的DDL信息拆分出来，并投递所述DDL信息至所述目标端同步进程；

所述目标端同步进程用于执行所述DDL信息的同步操作；

所述源端同步进程还用于将所述事务日志中的插入操作日志拆分成多个子事务日志，投递所有所述子事务日志至所述目标端同步进程；

所述目标端同步进程还用于并行执行所有所述子事务日志的同步操作；

所述源端同步进程包括日志捕获线程以及日志发送线程，所述目标端同步进程包括日志接收线程以及多个日志执行线程；

所述日志捕获线程用于依次提取设定数量的插入操作日志，并将设定数量的插入操作日志与一个提交日志打包成一个子事务日志；

所述日志发送线程用于发送所述子事务日志；

所述日志接收线程用于接收所述子事务日志并进行缓存；

所述日志接收线程还用于判断所述子事务日志中是否包含查询建表事务的提交日志，如果是则唤醒多个所述日志执行线程并行执行所有所述子事务日志的同步操作，否则执行下一个子事务日志的打包；

所述日志捕获线程具体用于执行以下步骤；

步骤S11、捕获查询建表事务的开始事务日志；

步骤S12、捕获查询建表事务的下一条事务日志，并进行缓存；

步骤S13、判断当前捕获的事务日志是否为提交日志，如果是则转事务日志的拆分，否则转步骤S12。

6.根据权利要求5所述的查询建表事务的拆分同步系统，其特征在于，所述日志捕获线程还用于为所述子事务日志设置事务ID，所述子事务日志的事务ID通过所述查询建表事务的事务ID执行设定算法后得到。

7.一种计算机存储介质，其上存储有计算机程序，其特征在于，所述计算机程序被处理器执行时，实现如权利要求1-4任一所述的查询建表事务的拆分同步方法。