[发明专利]一种分布式数据聚合方法和装置

权利要求书

1.一种分布式数据聚合方法，其特征在于，包括：

接收第一数据查询指令，获取所述第一数据查询指令所携带的第一查询条件，所述第一查询条件包括开始数据和目标数据；

基于第一预设规则修改所述第一查询条件生成第二查询条件，所述第二查询条件的查询范围的起始数据为待查询数据中的第一个数据，结束数据为所述开始数据与所述目标数据之和；

生成携带有所述起始数据与所述结束数据的所述第二查询条件的第二数据查询指令；

将所述第二数据查询指令分别发送给多个数据节点，接收所述多个数据节点各自返回的查询结果，得到所述第二数据查询指令所查询的第二查询结果；

基于所述第一查询条件从所述第二查询结果中获取所述第一数据查询指令的第一查询结果。

2.根据权利要求1所述的方法，其特征在于，所述基于第一预设规则修改所述第一查询条件生成第二查询条件，所述第二查询条件的查询范围的起始数据为待查询数据中的第一个数据，结束数据为所述开始数据与所述目标数据之和的步骤包括：

获取所述第一数据查询指令所携带的所述开始数据和所述目标数据；

将所述开始数据置为零并生成第二查询条件的起始数据；

将所述开始数据的初始值与所述目标数据的初始值相加并生成第二查询条件的结束数据的值；

生成所述第二查询条件。

3.根据权利要求1所述的方法，其特征在于，所述生成携带有所述起始数据与所述结束数据的所述第二查询条件的第二数据查询指令的步骤，还包括：

获取所述第一数据查询指令所携带的列字段；

当所述列字段为Distinct时，将所述列字段修改为GroupBy，生成第二数据查询指令。

4.根据权利要求1所述的方法，其特征在于，所述基于所述第一查询条件从所述第二查询结果中获取所述第一数据查询指令的第一查询结果的步骤包括：

获取所述第二查询结果；

根据所述第一查询条件的所述开始数据和所述目标数据，在所述第二查询结果中执行所述第一查询条件，获取所述第一数据查询指令的第一查询结果。

5.根据权利要求1所述的分布式数据聚合方法，其特征在于，所述基于所述第一查询条件从所述第二查询结果中获取所述第一数据查询指令的第一查询结果的步骤包括：

当所述第二数据查询指令所携带有分组条件时，将所述第二查询结果加入第一结果集内；

遍历已有所述第一结果集，将从所述第一结果集遍历到的第一数据与预设第二结果集内存储的第二数据进行比对，当所述第一数据与所述第二数据不是相同分组列时，将所述第一数据加入所述第二结果集；

当所述第一数据与所述第二数据是相同分组列时，并且所述第二数据查询指令中携带有合计函数时，遍历所述第二结果集内存储的数据，获取执行所述合计函数后的结果；

根据所述获取执行所述合计函数后的结果更新所述第二结果集中的所述第二数据，获取所述第一数据查询指令的第一查询结果。

6.一种分布式数据聚合装置，其特征在于，包括：

数据接收单元，用于接收第一数据查询指令，获取所述第一数据查询指令所携带的第一查询条件，所述第一查询条件包括开始数据和目标数据；

查询条件生成单元，用于基于第一预设规则修改所述第一查询条件生成第二查询条件，所述第二查询条件的查询范围的起始数据为待查询数据中的第一个数据，结束数据为所述开始数据与所述目标数据之和；

数据生成单元，用于生成携带有所述起始数据与所述结束数据的所述第二查询条件的第二数据查询指令；

数据执行单元，用于将所述第二数据查询指令分别发送给多个数据节点，接收所述多个数据节点各自返回的查询结果，得到所述第二数据查询指令所查询的第二查询结果；

数据获取单元，用于基于所述第一查询条件从所述第二查询结果中获取所述第一数据查询指令的第一查询结果。