[发明专利]数据处理方法、装置、电子设备及计算机可读存储介质

权利要求书

1.一种数据处理方法，其特征在于，包括：

获取预置的分布式发布订阅消息系统服务器的配置文件；

获取源数据库的变动消息；

根据所述配置文件，对所述源数据库的变动消息进行处理，并将处理后的源数据库的变动消息发送给目标数据库。

2.根据权利要求1所述的数据处理方法，其特征在于，所述配置文件包括：待处理的变动消息的结构，变化格式及线程池中的线程数量；

所述根据所述配置文件，对所述源数据库的变动消息进行处理，并将处理后的源数据库的变动消息发送给目标数据库的步骤，包括：

获取所述源数据库的变动消息类型；

根据所述源数据库的变动消息类型，确定数据的处理方式；

根据所述待处理的变动消息的结构，变化格式，线程池中的线程数量以及所述确定的数据的处理方式，将所述源数据库的变动消息进行数据转化，并将转化后的源数据库的变动消息发送给目标数据库。

3.根据权利要求2所述的数据处理方法，其特征在于，所述变动消息类型包括：插入、更新或删除；所述数据的处理方式包括：缓存系统的任务队列处理方式和高并发数据输入输出处理方式；根据所述源数据库的变动消息类型，确定数据的处理方式的步骤为：

所述源数据库的变动消息类型为插入或更新，确定数据的处理方式为所述高并发数据输入输出处理方式；

所述源数据库的变动消息类型为删除，确定数据的处理方式为所述缓存系统的任务队列处理方式。

4.根据权利要求3所述的数据处理方法，其特征在于，所述将转化后的源数据库的变动消息发送给目标数据库的步骤，包括：

通过关系型数据库管理系统的下载数据命令，将所述转化后的源数据库的变动消息发送给目标数据库。

5.一种数据处理装置，其特征在于，包括：

配置单元，用于获取预置的分布式发布订阅消息系统服务器的配置文件；

消息获取单元，用于获取源数据库的变动消息；

消息处理单元，用于根据所述配置文件，对所述源数据库的变动消息进行处理，并将处理后的源数据库的变动消息发送给目标数据库。

6.根据权利要求5所述的数据处理装置，其特征在于，所述配置文件包括：待处理的变动消息的结构，变化格式及线程池中的线程数量；

所述消息处理单元，包括：

消息类型获取子单元，用于获取所述源数据库的变动消息类型；

数据处理方式确定子单元，用于根据所述源数据库的变动消息类型，确定数据的处理方式；

数据处理子单元，用于根据所述待处理的变动消息的结构，变化格式，线程池中的线程数量以及所述确定的数据的处理方式，将所述源数据库的变动消息进行数据转化，并将转化后的源数据库的变动消息发送给目标数据库。

7.根据权利要求6所述的数据处理装置，其特征在于，所述变动消息类型包括：插入、更新或删除；所述数据的处理方式包括：缓存系统的任务队列处理方式和高并发数据输入输出处理方式；

所述数据处理方式确定子单元具体用于：

所述源数据库的变动消息类型为插入或更新，确定数据的处理方式为所述高并发数据输入输出处理方式；

所述源数据库的变动消息类型为删除，确定数据的处理方式为所述缓存系统的任务队列处理方式。

8.根据权利要求7所述的数据处理装置，其特征在于，所述数据处理子单元在将转化后的源数据库的变动消息发送给目标数据库时，通过关系型数据库管理系统的下载数据命令，将所述转化后的源数据库的变动消息发送给目标数据库。

9.一种电子设备，包括存储器、处理器及存储在所述存储器上并可在所述处理器上运行的计算机程序；其特征在于，所述处理器执行所述程序时实现如权利要求1-4任一项所述的数据处理方法。

10.一种计算机可读存储介质，用于存储计算机程序，其特征在于，所述计算机程序可被处理器执行如权利要求1-4任一项所述的数据处理方法。