[发明专利]一种数据同步方法及装置

权利要求书

1.一种数据同步方法，其特征在于，包括：

获取输入数据源和输出数据源；

对所述输入数据源和所述输出数据源进行规则配置，确定所述输入数据源的至少一个输入数据表，及所述输出数据源的至少一个输出数据表；

依据各所述输入数据表和各所述输出数据表，确定各所述输入数据表的至少一个输入字段，及各所述输出数据表的至少一个输出字段；

配置与所述输入数据源和所述输出数据源对应的同步触发条件；其中，所述同步触发条件包括时间戳条件、触发器条件、数据比对条件、日志识别增量条件中的任一种；

在满足所述同步触发条件时，对各所述输入字段和各所述输出字段进行同步处理，以将各所述输出字段同步至所述输入数据源。

2.根据权利要求1所述的方法，其特征在于，在所述获取输入数据源和输出数据源的步骤之后，还包括：

对所述输入数据源和所述输出数据源进行配置，确定所述输入数据源和所述输出数据源分别对应的配置项；

其中，所述配置项包括数据源ID、数据源待替换位置和数据源密码中的至少一项。

3.根据权利要求1所述的方法，其特征在于，在所述依据各所述输入数据表和各所述输出数据表，确定各所述输入数据表的至少一个输入字段，及各所述输出数据表的至少一个输出字段的步骤之后，还包括：

对各所述输出字段进行过滤处理；

依据各过滤处理后的输出字段，确定所述输出数据表对应的替换关键字；

依据所述替换关键字及各所述输入字段，对各所述过滤处理后的输出字段进行格式转换及合并处理，生成一目标输出数据表。

4.根据权利要求3所述的方法，其特征在于，所述对各所述输入字段和各所述输出字段进行同步处理，以将各所述输出字段同步至所述输入数据源的步骤，包括：

将所述目标输出数据表同步至所述输入数据源；

对所述目标输出数据表进行数据拆分处理，以得到至少一个替换字段；

将各所述替换字段，添加至各所述输入数据表。

5.根据权利要求4所述的方法，其特征在于，在所述对各所述输入字段和各所述输出字段进行同步处理的步骤之后，还包括：

对各所述替换字段进行去重处理，生成同步处理后的输入数据源。

6.一种数据同步装置，其特征在于，包括：

数据源获取模块，用于获取输入数据源和输出数据源；

数据表确定模块，用于对所述输入数据源和所述输出数据源进行规则配置，确定所述输入数据源的至少一个输入数据表，及所述输出数据源的至少一个输出数据表；

输入输出字段确定模块，用于依据各所述输入数据表和各所述输出数据表，确定各所述输入数据表的至少一个输入字段，及各所述输出数据表的至少一个输出字段；

触发条件配置模块，用于配置与所述输入数据源和所述输出数据源对应的同步触发条件；其中，所述同步触发条件包括时间戳条件、触发器条件、数据比对条件、日志识别增量条件中的任一种；

字段同步处理模块，用于在满足所述同步触发条件时，对各所述输入字段和各所述输出字段进行同步处理，以将各所述输出字段同步至所述输入数据源。

7.根据权利要求6所述的装置，其特征在于，还包括：

配置项确定模块，用于对所述输入数据源和所述输出数据源进行配置，确定所述输入数据源和所述输出数据源分别对应的配置项；

其中，所述配置项包括数据源ID、数据源待替换位置和数据源密码中的至少一项。

8.根据权利要求6所述的装置，其特征在于，还包括：

过滤处理模块，用于对各所述输出字段进行过滤处理；

替换关键字确定模块，用于依据各过滤处理后的输出字段，确定所述输出数据表对应的替换关键字；

目标输出数据表生成模块，用于依据所述替换关键字及各所述输入字段，对各所述过滤处理后的输出字段进行格式转换及合并处理，生成一目标输出数据表。