[发明专利]一种全量数据的同步方法及装置

说明书

本发明提供一种全量数据的同步方法及装置。所述方法包括：读取源数据库的数据文件，并解析出所述数据文件的数据字典、数据库对象和事务数据；通过交易文件的形式发送所述数据字典与所述数据库对象构成的数据框架到目标数据库的数据接收端；通过交易文件的形式发送所述事务数据发送到数据接收端；所述数据接收端将接收到的所述数据框架和事务数据按顺序装载到目标数据库中，实现源数据库和目标数据库的同步。利用本发明可提升数据库的同步效率，减少数据库的负载，降低数据库的资源占用率。

技术领域

本发明涉及数据库技术领域，具体涉及一种全量数据的同步方法及装置。

背景技术

数据库是应用业务系统中最核心的组成部分，数据库的稳定以及业务的连续性是应用业务系统中最关注的问题。

在许多数据库应用场景中(如双活、异地容灾等)，通常需两个或两个以上数据库中的数据保持同步。

现今通常将原数据库中的全量数据通过第三方数据容器转移到目标数据库。例如，可将原数据库中的数据拷贝到磁盘，再通过磁盘拷贝至目标数据库中，也可采用调用SQL方式进行数据传输，但这些方法数据同步速度慢，数据库的负载比较重，无法快速实现原数据库和目标数据库数据的实时同步，并且在数据同步过程中还会影响线上数据库的正常运行。

因此，如何提出一种方法，能够提高源数据库和目标数据库数据实时同步的效率，成为亟待解决的问题。

发明内容

针对现有技术中的缺陷，本发明实施例提供了一种全量数据的同步方法及装置。

第一方面，本发明实施例提供一种全量数据的同步方法，包括：

读取源数据库的数据文件，并解析出所述数据文件的数据字典、数据库对象和事务数据；

通过交易文件的形式发送所述数据字典与所述数据库对象构成的数据框架到目标数据库的数据接收端；

通过交易文件的形式发送所述事务数据发送到数据接收端；

所述数据接收端将接收到的所述数据框架和事务数据按顺序装载到目标数据库中，实现所述源数据库和所述目标数据库的同步。

第二方面，本发明实施例提供一种全量数据的同步装置，包括：

读取文件模块，用于读取源数据库的数据文件，并解析出所述数据文件的数据字典、数据库对象和事务数据；

发送数据框架模块，用于通过交易文件的形式发送所述数据字典与所述数据库对象构成的数据框架到目标数据库的数据接收端；

发送事务数据模块，用于通过交易文件的形式发送所述事务数据发送到数据接收端；

加载文件模块，用于所述数据接收端将接收到的所述数据框架和事务数据按顺序装载到目标数据库中，实现所述源数据库和所述目标数据库的同步。

第三方面，本发明实施例还提供了一种计算机设备，包括存储器和处理器，所述处理器和所述存储器通过总线完成相互间的通信；所述存储器存储有可被所述处理器执行的程序指令，所述处理器调用所述程序指令能够执行如下方法：

读取源数据库的数据文件，并解析出所述数据文件的数据字典、数据库对象和事务数据；

通过交易文件的形式发送所述数据字典与所述数据库对象构成的数据框架到目标数据库的数据接收端；

通过交易文件的形式发送所述事务数据发送到数据接收端；

所述数据接收端将接收到的所述数据框架和事务数据按顺序装载到目标数据库中，实现所述源数据库和所述目标数据库的同步。