[发明专利]一种数据集成方法及装置

权利要求书

1.一种数据集成方法，其特征在于，包括：

接收数据集成请求信息；

在所述源端数据库中查找与所述数据集成请求信息中携带的抽取条件相对应的数据；

分别将每条所述数据封装在一个数据对象中；

传输所述数据对象至目的端数据库；

获取所述数据对象中的数据，对所述数据进行集成。

2.根据权利要求1所述的方法，其特征在于，所述抽取条件包括抽取表表名、字段名以及抽取范围；

所述在所述源端数据库中查找与所述数据集成请求信息中携带的抽取条件相对应的数据，具体包括：

在源端数据库中所有预先设置的抽取表中查找与所述抽取表表名相同的抽取表，并将所述抽取表作为目的抽取表；

在所述目的抽取表中查找与所述字段名以及所述抽取范围相对应的数据。

3.根据权利要求2所述的方法，其特征在于，所述抽取条件中包括至少一个字段名；

所述分别将每条所述数据封装在一个数据对象中，具体包括：

分别将在所述目的抽取表中查找到与所述字段名以及所述抽取范围相对应的每条目的数据封装在一个数据对象中；所述目的数据中包括分别与所述抽取条件中的每个所述字段名相对应的字段数据。

4.根据权利要求3所述的方法，其特征在于，预先设置源端数据库中各个抽取表表名和抽取表字段名、目的端数据库中各个生成表表名和生成表字段名，所述抽取表表名与所述生成表表名之间的映射关系，以及所述抽取表字段名与所述生成表字段名之间的映射关系；

所述获取所述数据对象中的数据，对所述数据进行集成，具体包括：

获取所述数据对象中的各个字段数据；

分别获取各个所述字段数据的属性信息；所述属性信息包括：所述字段数据所属的抽取表表名以及抽取表字段名；

在预先设置的所述抽取表表名与所述生成表表名之间的映射关系中查询与所述字段数据所属的抽取表表名相对应的生成表表名，并将具有该查询到的生成表表名的生成表作为目的生成表；

根据所述抽取表字段名与所述生成表字段名之间的映射关系，在所述目的生成表中查询与所述字段数据所属的抽取表字段名相对应的目的生成表字段名；

分别根据查找到的与该字段数据相对应的目的生成表以及目的生成表字段名在目的端数据库中对所述字段数据进行存储。

5.根据权利要求1-4中任意一项所述的方法，其特征在于，预先设置线程数以及每个线程的数据处理范围；

根据预先设置的线程数以及每个线程的数据处理范围，传输所述数据对象至目的端数据库。

6.根据权利要求1-4中任意一项所述的方法，其特征在于，还包括：

判断在获取所述数据对象中的数据，对所述数据进行集成的过程中是否存在异常；

当存在时，将所述数据对象输出到日志文件中。

7.一种数据集成装置，其特征在于，包括：信息接收单元、数据查找单元、数据封装单元、数据对象传输单元以及数据集成单元，其中，

所述信息接收单元用于接收数据集成请求信息；

所述数据查找单元与所述信息接收单元相连接，用于在所述源端数据库中查找与所述数据集成请求信息中携带的抽取条件相对应的数据；

所述数据封装单元与所述数据查找单元相连接，用于分别将每条所述数据封装在一个数据对象中；

所述数据对象传输单元与所述数据封装单元相连接，用于传输所述数据对象至目的端数据库；

所述数据集成单元与所述数据对象传输单元相连接，用于获取所述数据对象中的数据，对所述数据进行集成。

8.根据权利要求7所述的装置，其特征在于，所述抽取条件包括抽取表表名、字段名以及抽取范围；

所述数据查找单元包括目的抽取表查找单元和数据查找子单元，其中，

所述目的抽取表查找单元与所述信息接收单元相连接，用于在源端数据库中所有预先设置的抽取表中查找与所述抽取表表名相同的抽取表，并将所述抽取表作为目的抽取表；

所述数据查找子单元与所述目的抽取表查找单元相连接，用于在所述目的抽取表中查找与所述字段名以及所述抽取范围相对应的数据。