[发明专利]一种基于数据变更收集技术的数据同步方法

权利要求书

1.一种基于数据变更收集技术的数据同步方法，其特征在于，所述方法包括以下步骤：步骤S1.主数据库实时监控二进制日志的变更操作，获取变更日志数据包； 步骤S2.选择发布方式，将所述变更日志数据包发布到消息管道； 步骤S3.从数据库订阅所述消息管道进行数据同步。

2.根据权利要求1所述的一种基于数据变更收集技术的数据同步方法，其特征在于，所述步骤S1包括： 步骤S1.1.在二进制日志中预设临时表和时间戳配置表； 步骤S1.2.切换临时表的空间，清空临时表的数据；

步骤S1.3.将根据时间戳配置表读取到的数据插入到临时表中；

步骤S1.4.从临时表中读取出数据的最大时间戳，并且更新到时间戳配置表中。

3.根据权利要求2所述的一种基于数据变更收集技术的数据同步方法，其特征在于，所述步骤S1.2包括： 查看临时表数据文件信息、修改临时表空间并删除原有的临时表空间及相关数据文件实现临时表空间的切换。

4.根据权利要求1所述的一种基于数据变更收集技术的数据同步方法，其特征在于，所述步骤S1还包括： 将二进制日志的变更操作串行地写入变更日志数据包中。

5.根据权利要求1所述的一种基于数据变更收集技术的数据同步方法，其特征在于，所述步骤S2中的发布方式包括同步写从库方式和异步写从库方式。

6.根据权利要求5所述的一种基于数据变更收集技术的数据同步方法，其特征在于，所述同步写从库方式包括： 当变更日志数据包在消息管道落盘成功，主数据库才请求返回。

7.根据权利要求5所述的一种基于数据变更收集技术的数据同步方法，其特征在于，所述异步写从库方式包括：

当变更日志数据包发往消息管道上，主数据库请求立即反馈。

8.根据权利要求1所述的一种基于数据变更收集技术的数据同步方法，其特征在于，所述步骤S3包括： 获取变更日志数据包的读取进度，当读取进度和主数据库发布所述变更日志数据包的进度一致时，判断从数据库进行数据同步，否则，从数据库继续等待。