[发明专利]数据库的同步方法、装置、设备及存储介质

说明书

本发明实施例公开了一种数据库的同步方法、装置、设备及存储介质。该方法包括：获取源数据库和目标数据库的表结构信息；根据所述源数据库的表结构信息与所述目标数据库的表结构信息，以及预设的字段属性捕获规则，确定表结构变更信息；根据所述表结构变更信息生成变更语句，并控制所述目标数据库执行所述变更语句，以更新所述目标数据库的表结构信息；获取所述源数据库中与所述表结构变更信息匹配的更新数据同步至所述目标数据库中。本发明实施例的技术方案，克服了现有技术的方案缺陷，还实现了库表字段多属性可选、内容可过滤的同步功能，解决了因源数据库字段属性特殊导致数据同步失败的问题。

技术领域

本发明实施例涉及数据库技术领域，尤其涉及一种数据库的同步方法、装置、设备及存储介质。

背景技术

ODS(Operational Data Store，操作数据存储)作为DW(Data Warehouse，数据仓库)和业务系统的中间数据层，用于存放从业务系统中直接抽取出来的数据，且需要与业务数据源保持同步，具体是要与业务数据库的表结构同步以及数据同步。

现有技术中，一般是通过设计外部程序来感知业务数据库的表结构变更和数据变更，然后通过解析变更信息生成SQL(Structured Query Language，结构化查询语言)语句并使目标数据库执行SQL语句，以达到数据库同步的效果，具体可以通过日志来记录对数据库的改动，例如MySQL(关系型数据库管理系统)数据库中的binlog，但是当根据binlog同步失败时，需要人工介入在大量日志记录中找到出错时间点并手动执行时间区间内的binlog，如果在业务库已经运行的情况下，还需要手动执行业务库的全备和恢复，并确保binlog同步的时间点与全备一致；还可以是通过设计触发器程序和存储程序来实现表结构和数据变更同步，但是这样设计会加重业务数据库的负担，且容易出现由于触发器程序和存储程序设计有差别时而导致通用性差的问题。

发明内容

本发明实施例提供一种数据库的同步方法、装置、设备及存储介质，以克服现有技术的方案缺陷，并解决因业务数据库字段属性特殊而导致数据同步失败的问题。

第一方面，本发明实施例提供了一种数据库的同步方法，包括：

获取源数据库和目标数据库的表结构信息；

根据所述源数据库的表结构信息与所述目标数据库的表结构信息，以及预设的字段属性捕获规则，确定表结构变更信息；

根据所述表结构变更信息生成变更语句，并控制所述目标数据库执行所述变更语句，以更新所述目标数据库的表结构信息；

获取所述源数据库中与所述表结构变更信息匹配的更新数据同步至所述目标数据库中。

第二方面，本发明实施例还提供了一种数据库的同步装置，包括：

表结构信息获取模块，用于获取源数据库和目标数据库的表结构信息；

表结构变更确定模块用于，根据所述源数据库的表结构信息与所述目标数据库的表结构信息，以及预设的字段属性捕获规则，确定表结构变更信息；

表结构同步模块，用于根据所述表结构变更信息生成变更语句，并控制所述目标数据库执行所述变更语句，以更新所述目标数据库的表结构信息；

数据同步模块，用于获取所述源数据库中与所述表结构变更信息匹配的更新数据同步至所述目标数据库中。

第三方面，本发明实施例还提供了一种设备，包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序，所述处理器执行所述程序时实现如本发明任意实施例所述的数据库的同步方法。

第四方面，本发明实施例还提供了一种计算机可读存储介质，其上存储有计算机程序，该程序被处理器执行时实现如本发明任意实施例所述的数据库的同步方法。