[发明专利]一种查询请求的调度方法、装置及计算机系统

说明书

本申请公开了一种查询请求的调度方法、装置及计算机系统，所述方法包括：接收用户的查询请求；解析并确定查询请求对应的待查询数据；根据所述待查询数据对应的元数据，确定所述待查询数据对应的待查询数据量；根据所述待查询数据量对应的预设分配策略将所述待查询数据分配给预设线程，以便所述预设线程获取所述待查询数据并返回给所述用户，实现了根据查询请求对应的待查询数据量选取对应的线程分配策略，并根据选取的策略将待查询数据分配给一个或多个预设线程，预设线程用于从数据库获取相应的数据以便返回给用户，避免了不合适的向线程分配数据量大的待查询数据导致阻塞，导致其他查询请求需要长时间等待，影响数据量小的查询请求的处理时效。

技术领域

本发明涉及大数据分析领域，尤其涉及一种查询请求的调度方法、装置及计算机系统。

背景技术

随着各类公司大数据平台的不断演进和推广，各类OLAP(联机分析处理)平台不断接入各种业务场景，OLAP底层引擎的查询场景和复杂度不断提升，常常出现资源分配不合理，导致资源利用率低。

同时，各个查询请求之间也容易互相影响，例如数据量大的查询可能会导致数据量小的查询长时间等待、优先级高的查询会因优先级较低的查询而不得不等待。因此，亟需一种能够对OLAP的资源进行合理调度的技术方案。

发明内容

为了解决现有技术的不足，本发明的主要目的在于提供一种查询请求的调度方法、装置及计算机系统，以实现对OLAP资源的合理调度。

为了达到上述目的，第一方面本发明提供了一种查询请求的调度方法，所述方法包括：

接收用户的查询请求；

解析并确定所述查询请求对应的待查询数据；

根据所述待查询数据对应的元数据，确定所述待查询数据对应的待查询数据量；

根据所述待查询数据量对应的预设分配策略将所述待查询数据分配给预设线程，所述预设线程用于获取所述待查询数据以便返回给所述用户。

在一些实施例中，所述查询请求包括聚合查询，所述方法包括：

根据所述待查询数据对应的元数据，确定所述待查询数据对应的基数；

根据所述基数，确定聚合所述待查询数据所需的内存容量；

确定内存容量不小于所述所需的内存容量的内存块中内存容量最小的内存块为目标内存块，每一内存块具有预设大小的内存容量；

在所述目标内存块中对获取的所述待查询数据进行聚合，将聚合后的所述待查询数据返回给所述用户。

在一些实施例中，所述查询请求包括对应的目标优先级，所述根据所述待查询数据量对应的预设分配策略将所述待查询数据分配给预设线程，所述预设线程用于获取所述待查询数据以便返回给所述用户包括：

根据所述待查询数量对应的预设分配策略，将所述待查询数据分配给所述目标优先级对应的线程池内的第一预设线程，所述第一预设线程用于获取所述待查询数据以便返回给所述用户。

在一些实施例中，所述方法包括：

当所述目标优先级对应的线程池内的第一预设线程不可用时，将所述待查询数据分配给优先级低于所述目标优先级的线程池内的第二预设线程，所述第二预设线程用于获取所述待查询数据以便返回给所述用户。

在一些实施例中，所述待查询数据预先存储在数据段内，待查询数据量包括所述数据段的数量，所述根据所述待查询数据量对应的预设分配策略将所述待查询数据分配给预设线程，所述预设线程用于获取所述待查询数据以便返回给所述用户包括：

根据所述数据段的数量对应的预设分配策略将所述数据段分配给预设线程，所述预设线程用于从所述数据段获取所述待查询数据以便返回给所述用户。