[发明专利]数据同步方法、数据同步装置、电子设备及存储介质

权利要求书

1.一种数据同步方法，其特征在于，包括以下步骤：

从源数据库的一张数据表中获取变化和新增的数据，并从所述数据表的索引块中获取全量主键字段数据；

将所述全量主键字段数据同步至目标数据库，得到主键文件，并将所述变化和新增的数据同步至所述目标数据库，得到第一增量文件；

删除第一历史文件中的第二增量文件，得到第二历史文件，所述第一历史文件为与当前时间最接近的历史数据文件，所述第二增量文件为所述第一历史文件中变化和新增的数据文件；

合并所述第一增量文件与所述第二历史文件，得到临时文件；

等值联合所述主键文件与所述临时文件，得到全量文件。

2.如权利要求1所述的数据同步方法，其特征在于，所述从源数据库的一张数据表中获取变化和新增的数据，并从所述数据表的索引块中获取全量主键字段数据的步骤包括：

根据时间戳字段从所述源数据库的一张数据表中抽取变化和新增的数据，并直接从所述数据表的索引块中读取全量主键字段数据。

3.如权利要求1所述的数据同步方法，其特征在于，所述将所述全量主键字段数据同步至目标数据库，得到主键文件，并将所述变化和新增的数据同步至所述目标数据库，得到第一增量文件的步骤包括：

用全量方法同步所述主键字段数据，得到所述主键文件，并用增量方法同步所述变化和新增的数据，得到所述第一增量文件。

4.如权利要求1所述的数据同步方法，其特征在于，在预设时间段内同时执行从所述源数据库的一张数据表中获取变化和新增的数据以及从所述数据表的索引块中获取全量主键字段数据的操作；

和/或，

所述第一历史文件为前一天文件，所述全量文件为当天全量文件。

5.一种数据同步装置，其特征在于，包括获取模块、同步模块、删除模块、合并模块和等值联合模块；

所述获取模块用于从源数据库的一张数据表中获取变化和新增的数据，并从所述数据表的索引块中获取全量主键字段数据；

所述同步模块用于将所述全量主键字段数据同步至目标数据库，得到主键文件，并将所述变化和新增的数据同步至所述目标数据库，得到第一增量文件；

所述删除模块用于删除第一历史文件中的第二增量文件，得到第二历史文件，所述第一历史文件为与当前时间最接近的历史数据文件，所述第二增量文件为所述第一历史文件中变化和新增的数据文件；

所述合并模块用于合并所述第一增量文件与所述第二历史文件，得到临时文件；

所述等值联合模块用于等值联合所述主键文件与所述临时文件，得到全量文件。

6.如权利要求5所述的数据同步装置，其特征在于，所述获取模块包括抽取单元和读取单元；

所述抽取单元用于根据时间戳字段从所述源数据库的一张数据表中抽取变化和新增的数据，并调用所述读取单元；

所述读取单元用于直接从所述数据表的索引块中读取全量主键字段数据。

7.如权利要求5所述的数据同步装置，其特征在于，所述同步模块包括全量同步单元和增量同步单元；

所述全量同步单元用于用全量方法同步所述主键字段数据，得到所述主键文件，并调用所述增量同步单元；

所述增量同步单元用于用增量方法同步所述变化和新增的数据，得到所述第一增量文件。

8.如权利要求5所述的数据同步装置，其特征在于，所述获取模块在预设时间段内同时执行从所述源数据库的一张数据表中获取变化和新增的数据以及从所述数据表的索引块中获取全量主键字段数据的操作；

和/或，

所述第一历史文件为前一天文件，所述全量文件为当天全量文件。

9.一种电子设备，包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序，其特征在于，所述处理器执行所述计算机程序时实现如权利要求1-4中任意一项所述的数据同步方法。

10.一种计算机可读存储介质，其上存储有计算机程序，其特征在于，所述计算机程序被处理器执行时实现如权利要求1-4中任意一项所述的数据同步方法的步骤。