[发明专利]一种自动化实现数据实时同步的系统

摘要

本发明涉及数据实时同步相关领域，具体为一种自动化实现数据实时同步的系统，包括Canal订阅BinLog日志模块、数据配置模块、数据同步模块和数据对账模块，本发明相比现有的同步的系统，有以下的优点：只需要进行基本的数据库连接信息的配置和需要监听的Kafka Topic的配置，不需要进行额外的任何配置；不需要进行全量同步，进行增量的同步，效率高；借助Kafka消息中间件的优势，体现在消息传递的速度快，这样可以加快数据实时同步的效率；不需要借助数据库的触发器机制进行同步，避免了id自增的限制；同步不需要借助时间戳方式，避免了临时表的引入，因为如果表同步的量很大，需要的临时表也会增加，这样需要的内存空间也很大。