[发明专利]快速迁移Oracle数据到MPP数据库的方法及工具

权利要求书

1.一种快速迁移Oracle数据到MPP数据库的方法，其特征在于，包括如下步骤：

(1)获取oracle数据库相应的元数据信息，并依据元数据信息和策略模式拆分为多个可并行的子任务；

(2)并发执行步骤(1)中拆分出的子任务，进行数据抽取与转换操作；

(3)将步骤(2)数据抽取与转换操作获取的数据向MPP数据库加载。

2.根据权利要求1所述的一种快速迁移Oracle数据到MPP数据库的方法，其特征在于：所述步骤(1)中，元数据信息包括表名，分区信息，表的每个block的最大、最小ROWID值。

3.根据权利要求1或2所述的一种快速迁移Oracle数据到MPP数据库的方法，其特征在于，所述步骤(1)中子任务拆分的方法为：

(11)根据获取的元数据信息，计算得出一张表的全部数据摘要信息；

(12)根据数据摘要信息对整表的数据进行切分，切分为多个子任务的输出；

(13)每个子任务处理一个切片，全部子任务的合集为该表的完整数据。

4.一种快速迁移Oracle数据到MPP数据库的工具，其特征在于：包括元数据获取与计算模块，并行提取转换模块，数据加载模块；所述元数据获取与计算模块用于获取oracle数据库相应的元数据信息，并依据元数据信息和策略模式拆分为多个可并行的子任务；所述并行提取转换模块用于并发执行拆分出的子任务，进行数据抽取与转换操作；所述数据加载模块用于将并行提取转换模块获取的数据向MPP数据库加载。

5.根据权利要求4所述的一种快速迁移Oracle数据到MPP数据库的工具，其特征在于，所述元数据获取与计算模块包括元数据信息获取单元，用于获取表名，分区信息，表的每个block的最大、最小ROWID值；还包括计算单元，用于根据获取的元数据信息，计算得出一张表的全部数据摘要信息；还包括切分单元，用于根据数据摘要信息对整表的数据进行切分，切分为多个子任务的输出。

6.根据权利要求4或5所述的一种快速迁移Oracle数据到MPP数据库的工具，其特征在于：所述元数据获取与计算模块、并行提取转换模块、数据加载模块互为生产者消费者模式，保证高性能流水作业。

7.根据权利要求4或5所述的一种快速迁移Oracle数据到MPP数据库的工具，其特征在于：在数据加载模块设置有策略模式单元，用于设置数据加载策略模式为高扩展性适应MPP数据库的多种加载数据模式或者数据的多样化输出模式。