[发明专利]一种异构数据库的数据同步方法、装置、设备及介质

说明书

本发明涉及数据库处理领域，尤其涉及一种异构数据库的数据同步方法、装置、设备及介质。所述方法包括：获取源数据库和目的数据库的类型，并判断二者类型是否相同；响应于源数据库和目的数据库的类型不同，则获取源数据库需要更新同步的数据并写入预设文件中；监听所述预设文件并判断所述预设文件是否有变动；响应于所述预设文件有变动，则读取所述预设文件，并将所述预设文件转换成TJSON格式文件；利用所述TJSON格式文件对所述目的数据库数据进行更新同步。本发明的方案实现了自动将源数据库中的数据自动转换成目的数据库中的数据，不仅能够节省时间，而且避免手动创建数据带来的错误，具有较高的处理效率和较高的准确性。

技术领域

本发明涉及数据库处理领域，尤其涉及一种异构数据库的数据同步方法、装置、设备及介质。

背景技术

随着信息技术的发展，数据成为不管企业还是个人非常重要的信息。通常数据存放在数据库中。常用的数据库类型有关系型数据库和非关系型数据库。常用的关系型数据库有SQLite、MySQL等。常用的非关系型数据库有Hbase、redis等。随着数据量数据类型的增加，单一的数据库类型不能满足企业数据存放，所以会导致数据会存放在不同类型的数据库中。这样就会带来不同类型数据库之间数据的同步更新。

目前数据库之间数据的更新同步，是同种数据库之间数据的同步更新，就是使用该数据库的备份还原功能，无法在异构数据库进行数据的更新同步。虽然异构数据库之间可以通过人工在目的数据库中手动创建数据实现同步，但是此种方式需要耗费大量的时间，同步效率较低，并且准确性过于依赖操作人员，因此亟需改进。

发明内容

有鉴于此，有必要针对以上技术问题，提供一种异构数据库的数据同步方法、装置、设备及介质。

根据本发明的第一方面，提供了一种异构数据库的数据同步方法，所述方法包括：

获取源数据库和目的数据库的类型，并判断二者类型是否相同；

响应于源数据库和目的数据库的类型不同，则获取源数据库需要更新同步的数据并写入预设文件中；

监听所述预设文件并判断所述预设文件是否有变动；

响应于所述预设文件有变动，则读取所述预设文件，并将所述预设文件转换成TJSON格式文件；

利用所述TJSON格式文件对所述目的数据库数据进行更新同步。

在一些实施例中，所述获取源数据库需要更新同步的数据并写入预设文件中，包括：

判断源数据库需要更新同步的数据大小是否超过预设值；

响应于源数据库需要更新同步的数据大小未超过预设值，则直接将源数据库需要更新同步的数据写入所述预设文件；

响应于源数据库需要更新同步的数据大小超过预设值，则将源数据库需要更新同步的数据分批次写入所述预设文件，其中，每一批次写入的数据量均不超过所述预设值，暂时未写入所述预设文件的数据存放在缓存中。

在一些实施例中，所述获取源数据库需要更新同步的数据并写入预设文件中，还包括：

定时获取所述源数据库的数据库系统日志，并基于所述数据库系统日志判断源数据库是否发生数据变动；

响应于所述源数据库发生数据变动，则将变动数据写入源数据库/tmp/appointment/目录下的指定excel文件中。

在一些实施例中，所述读取所述预设文件，并将所述预设文件转换成TJSON格式文件，包括：

读取所述指定excel获取源数据库中要更新同步的数据和数据操作类型；

按照操作类型将要更新同步的数据转换成TJSON格式文件用于目的数据库查看。