[发明专利]基于数据仓库的数据处理系统和方法

权利要求书

1.一种基于数据仓库的数据处理系统，该系统包括：

临时数据模型建立单元，被配置为根据用户输入动态地建立临时数据模型；

筛选收集单元，被配置为根据所述临时数据模型从所述数据仓库中筛选并收集数据；以及

加载单元，被配置为将筛选出的数据加载到扩展存储系统中。

2.如权利要求1所述的数据处理系统，其中，所述扩展存储系统包括加速存储数据库。

3.如权利要求2所述的数据处理系统，其中，如果所述所筛选出的数据的量大于阈值和/或需要多表关联查询，则将所述所筛选出的数据加载到所述加速存储数据库中。

4.如权利要求1所述的数据处理系统，其中，所述扩展存储系统包括功能扩展数据库。

5.如权利要求4所述的数据处理系统，其中，所述功能扩展数据库对所述所筛选出的数据进行高级统计函数处理。

6.如权利要求2所述的数据处理系统，其中，所述加速存储数据库包括列式存储数据库。

7.如权利要求6所述的数据处理系统，其中，所述列式存储数据库是Infobright存储引擎。

8.如权利要求4所述的数据处理系统，其中，所述功能扩展数据库包括关系数据库。

9.如权利要求8所述的数据处理系统，其中，所述关系数据库是PostgreSQL数据库。

10.如权利要求1所述的数据处理系统，还包括：分析计算单元，被配置为根据用户查询范围，在所述扩展存储系统中对所述筛选出的数据执行分析和计算处理并输出处理结果。

11.如权利要求10所述的数据处理系统，其中，所述分析和计算处理包括合并汇总处理，用于对所述筛选出的数据进行汇总和统计。

12.如权利要求1所述的数据处理系统，其中，所述加载单元还被配置为根据所述扩展存储系统的存储结构来对所述筛选出的数据进行格式转换。

13.如权利要求1所述的数据处理系统，其中，所述数据仓库基于筛选收集和合并汇总集群存储和计算。

14.如权利要求10所述的数据处理系统，还包括报表输出单元，被配置为以表格、图表格式输出所述处理结果。

15.如权利要求1所述的数据处理系统，其中，所述临时数据模型包括一个或多个用户查询项和与查询项相关联的一个或多个限定条件。

16.一种基于数据仓库的数据处理方法，该方法包括：

临时数据模型建立步骤，用于根据用户输入动态地建立临时数据模型；

筛选收集步骤，用于根据所述临时数据模型从所述数据仓库中筛选并收集数据；以及

加载步骤，用于将筛选出的数据加载到扩展存储系统中。

17.如权利要求16所述的数据处理方法，其中，所述扩展存储系统包括加速存储数据库。

18.如权利要求17所述的数据处理方法，其中，如果所述所筛选出的数据的量大于阈值和/或需要多表关联查询，则将所述所筛选出的数据加载到所述加速存储数据库中。

19.如权利要求16所述的数据处理方法，其中，所述扩展存储系统包括功能扩展数据库。

20.如权利要求19所述的数据处理方法，其中，所述功能扩展数据库对所述所筛选出的数据进行高级统计函数处理。

21.如权利要求17所述的数据处理方法，其中，所述加速存储数据库包括列式存储数据库。

22.如权利要求21所述的数据处理方法，其中，所述列式存储数据库是Infobright存储引擎。

23.如权利要求19所述的数据处理方法，其中，所述功能扩展数据库包括关系数据库。

24.如权利要求23所述的数据处理方法，其中，所述关系数据库是PostgreSQL数据库。

25.如权利要求16所述的数据处理方法，还包括：根据用户查询范围，在所述扩展存储系统中对所述筛选出的数据执行分析和计算处理并输出处理结果。