[发明专利]异构数据库之间数据同步方法、系统、设备及存储介质

说明书

本发明公开了一种异构数据库之间数据同步方法、系统、设备及存储介质。所述方法用于在异构的源数据库和目标数据库之间同步数据。所述方法包括：采集源数据库中各表的元数据；根据所述源数据库和所述目标数据库之间的差异对所述元数据进行检验；其中，所述源数据库和所述目标数据库为异构数据库；当检验完成后，将所述源数据库的表结构转换为所述目标数据库的表结构；在所述源数据库和所述目标数据库之间进行数据同步。上述方法、系统、设备及存储介质可以可靠地实现异构数据库之间的数据同步。

技术领域

本发明涉及数据库，尤其涉及异构数据库之间数据同步方法、系统、设备及存储介质。

背景技术

近年来随着开源数据库的持续发展和在实际生产活动中的广泛应用，开源数据库的稳定性和生态环境都得到了极大的提高，在此背景下商业数据库Oracle不再是大家一成不变的选择。与此同时，Oracle数据库笨重，闭源，收费昂贵，周边开发不够灵活的缺点被无限放大，引入新的开源数据库后，数据从传统Oracle流向开源数据库，抑或是生产系统从Oracle直接迁移到开源数据库是势在必行的，那么就需要一种可靠的数据同步方法。

发明内容

本申请实施例通过提供一种异构数据库之间数据同步方法的方法、系统、存储介质，解决了现有技术中异构数据库之间数据同步方法的可靠性问题。

一种异构数据库之间数据同步方法，所述方法包括：

采集源数据库中各表的元数据；

根据所述源数据库和所述目标数据库之间的差异对所述元数据进行检验；其中，所述源数据库和所述目标数据库为异构数据库；

当检验完成后，将所述源数据库的表结构转换为所述目标数据库的表结构；

在所述源数据库和所述目标数据库之间进行数据同步。

在其中一个实施例中，所述元数据包括表级别信息、列信息、索引和约束信息。

在其中一个实施例中，所述根据源数据库和目标数据库之间的差异对元数据进行检验，包括：

检验源数据库和目标数据库之间是否存在唯一键约束差异，以将源数据库中重复的数据删除。

在其中一个实施例中，所述当检验完成后，将源数据库的表结构转换为目标数据库的表结构，包括：

获取源数据库和目标数据库之间数据类型的映射关系；

对源数据库中的每一源表，根据其表级别信息在目标数据库中创建目标表，并将表级别信息写入目标表；

根据源表的列信息在目标表中创建列，并根据所述映射关系设置目标表各列的数据类型；

根据源表的索引和约束信息，在目标表中添加索引和约束。

在其中一个实施例中，所述在源数据库和目标数据库之间进行数据同步，包括：

设置增量数据记录点；

对所述增量数据记录点之前的所有历史数据进行全量数据同步；

对所述增量数据记录点之后的数据进行增量数据追踪得到增量数据；

在所述全量数据同步完成后，对所述增量数据进行同步。

在其中一个实施例中，所述对增量数据进行同步包括：

在进行增量数据追踪时，将源数据库中的数据变化封装为正向增量消息加入消息队列；

在对目标数据库进行增量数据同步时，从所述消息队列中取出所述正向增量消息，并解析为增量数据后进行数据融合；

在对目标数据库进行增量数据同步时，记录工作检查点以保障断点续传；