[发明专利]一种数据聚合查询的方法及装置

权利要求书

1.一种数据聚合查询的方法，其特征在于，包括如下步骤：

第一级节点对各自存储的数据执行聚合查询，所述节点为无共享架构下的节点；

将第一级节点执行聚合查询后得到的数据汇总至第二级节点；

第二级节点对第一级节点执行聚合查询后得到的数据执行聚合查询；

进一步包括：在第一级节点对各自存储的数据执行聚合查询之前，第一级节点对各自存储的数据执行过滤查询；

进一步包括：当数据存在重复时，第一级节点采用含有DISTINCT的结构化查询语言SQL语句执行数据去重，将去重后的数据添加至列表中；

第一级节点确定GROUP BY的SQL语句，并将所述列表中的去重的数据加入到所述GROUP BY的SQL语句执行数据聚合查询；

将第一级节点执行聚合查询后得到的数据汇总至第二级节点；

第二级节点对第一级节点聚合查询后得到的数据执行去重后，确定聚合函数对去重后的数据执行聚合查询。

2.如权利要求1所述的方法，其特征在于，当第一级节点中采用非简单聚合函数执行数据聚合查询时，第一级节点将非简单聚合函数分解为多个简单聚合函数执行数据聚合查询，其中，简单聚合函数包括以下函数之一或者其组合：SUM、COUNT、MAX、MIN，非简单聚合函数包括以下函数之一：AVG、CHECKSUM、BINARY_CHECKSUM、STDEV、STDEVP、VAR、VARP。

3.如权利要求1所述的方法，其特征在于，进一步包括：当第一级节点或第二级节点确定聚合函数为MAX或MIN执行聚合查询时，省略数据去重。

4.如权利要求1所述的方法，其特征在于，当执行数据的分组聚合查询时，第一级节点根据含有GROUP BY的SQL语句对数据执行分组聚合查询；

将第一级节点执行数据分组聚合查询后得到的数据汇总至第二级节点；

第二级节点根据含有GROUP BY的SQL语句对第一级节点执行分组聚合查询后得到的数据执行分组聚合查询。

5.如权利要求4所述的方法，其特征在于，当分组列中含有数据的分布列时，第一级节点根据含有GROUP BY的SQL语句对分组列数据执行分组聚合查询，所述数据的分布列是以列表List、范围Range和/或哈希Hash的形式分布的；

将第一级节点执行数据分组聚合查询后得到的数据汇总至第二级节点。

6.如权利要求4所述的方法，其特征在于，当分组列中不包含数据的分布列时，第一级节点根据含有GROUP BY的SQL语句对分组列数据执行分组聚合查询；

将第一级节点根据含有GROUP BY的SQL语句对分组列数据执行分组聚合查询后得到的数据汇总至第二级节点；

第二级节点对第一级节点分组聚合查询后的数据划分后执行分组聚合查询；

将第二级节点分组聚合查询后得到的数据汇总至第三级节点；

第三级节点对第二级节点分组聚合查询后得到的数据执行聚合查询。

7.一种数据聚合查询的装置，其特征在于，包括：

第一执行模块，用于在第一级节点对各自存储的数据执行聚合查询，所述节点为无共享架构下的节点；

汇总模块，用于将第一级节点执行聚合查询后得到的数据汇总至第二级节点；

第二执行模块，用于在第二级节点对第一级节点执行聚合查询后得到的数据执行聚合查询；

第一执行模块进一步用于在第一级节点对各自存储的数据执行聚合查询之前，在第一级节点对各自存储的数据执行过滤查询；

第一执行模块进一步用于当数据存在重复时，在第一级节点采用含有DISTINCT的结构化查询语言SQL语句执行数据去重，将去重后的数据添加至列表中，第一级节点确定GROUP BY的SQL语句，并将所述列表中的去重的数据加入到所述GROUP BY的SQL语句执行数据聚合查询；

汇总模块进一步用于将第一级节点执行聚合查询后得到的数据汇总至第二级节点；

第二执行模块进一步用于在第二级节点对第一级节点聚合查询后得到的数据执行去重后，确定聚合函数对去重后的数据执行聚合查询。