[发明专利]一种分布式数据聚合方法和装置

说明书

本发明实施例提供的一种分布式数据聚合方法和装置，属于计算机技术领域。该方法包括：接收第一数据查询指令，获取第一数据查询指令所携带的第一查询条件，第一查询条件包括开始数据和目标数据；基于第一预设规则修改第一查询条件生成第二查询条件，第二查询条件的查询范围的起始数据为待查询数据中的第一个数据，结束数据为开始数据与目标数据之和；生成携带有起始数据与结束数据的第二查询条件的第二数据查询指令。从而使得第一数据查询指令能够从第二数据查询指令所获取到的结果中获取该第一数据查询指令欲获取的查询结果，进而实现跨多个存储节点查询后对于查询结果的聚合操作问题。

技术领域

本发明涉及计算机技术领域，具体而言，涉及一种分布式数据聚合方法和装置。

背景技术

目前企业级应用对于海量数据的管理，最流行的解决方案是通过数据库切分技术将数据存储到多个数据库节点，从而实现对海量数据的管理。但是对于复杂数据模型如关系型数据库，在关系型数据库中进行读取数据时对于跨分片的聚合操作却是一个非常棘手的问题。目前已知的技术方案并不具备跨多个存储节点查询后对于查询结果的聚合操作功能，但是生产环境中却很难避免这样的问题。因此，如何解决上述问题是目前面临的一大难题。

发明内容

本发明提供一种分布式数据聚合方法和装置，旨在实现跨多个存储节点查询后对于查询结果的聚合操作问题。

本发明提供的一种分布式数据聚合方法，包括：接收第一数据查询指令，获取所述第一数据查询指令所携带的第一查询条件，所述第一查询条件包括开始数据和目标数据；基于第一预设规则修改所述第一查询条件生成第二查询条件，所述第二查询条件的查询范围的起始数据为待查询数据中的第一个数据，结束数据为所述开始数据与所述目标数据之和；生成携带有所述起始数据与所述结束数据的所述第二查询条件的第二数据查询指令；将所述第二数据查询指令分别发送给多个数据节点，接收所述多个数据节点各自返回的查询结果，得到所述第二数据查询指令所查询的第二查询结果；基于所述第一查询条件从所述第二查询结果中获取所述第一数据查询指令的第一查询结果。

本发明提供的一种分布式数据聚合装置，包括：数据接收单元，用于接收第一数据查询指令，获取所述第一数据查询指令所携带的第一查询条件，所述第一查询条件包括开始数据和目标数据；查询条件生成单元，用于基于第一预设规则修改所述第一查询条件生成第二查询条件，所述第二查询条件的查询范围的起始数据为待查询数据中的第一个数据，结束数据为所述开始数据与所述目标数据之和；数据生成单元，用于生成携带有所述起始数据与所述结束数据的所述第二查询条件的第二数据查询指令；数据执行单元，用于将所述第二数据查询指令分别发送给多个数据节点，接收所述多个数据节点各自返回的查询结果，得到所述第二数据查询指令所查询的第二查询结果；数据获取单元，用于基于所述第一查询条件从所述第二查询结果中获取所述第一数据查询指令的第一查询结果。

上述本发明提供的一种分布式数据聚合方法和装置，通过第二数据查询指令所携带的第二查询条件从每个数据节点获取足够多的数据，从而使得第一数据查询指令能够从第二数据查询指令所获取到的结果中获取该第一数据查询指令欲获取的查询结果，从而实现跨多个存储节点查询后对于查询结果的聚合操作问题。

附图说明

为了更清楚地说明本发明实施例的技术方案，下面将对实施例中所需要使用的附图作简单地介绍，应当理解，以下附图仅示出了本发明的某些实施例，因此不应被看作是对范围的限定，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他相关的附图。

图1为本发明实施例提供的用户终端与服务器进行交互的示意图；

图2为本发明实施例提供的一种电子设备的结构框图；

图3为本发明第一实施例提供的一种分布式数据聚合方法的流程图；

图4为本发明第二实施例提供的一种分布式数据聚合方法的流程图；