[发明专利]一种数据查询的分配方法及装置

说明书

本发明公开了一种数据查询的分配方法及装置，涉及数据处理技术领域，为解决现有的数据查询时全部数据均统一处理，使得当存在数据量较大查询时占用磁盘带宽而导致数据量较小的查询仍需等待很长时间，造成的数据查询的效率较低的问题。本发明的方法包括：接收数据查询请求；根据所述标识信息，获取与所述待查询数据对应的数据量信息；按照所述数据量信息，分配与所述数据查询请求对应的数据处理集群。本发明适合应用在数据查询的分配中。

技术领域

本发明涉及数据处理技术领域，尤其涉及一种数据查询的分配方法及装置。

背景技术

随着网络技术的不断发展，企业信息系统产生了大量的业务数据，而从这些海量的业务数据中提取出对企业决策分析有用的信息，这成为企业决策管理人员十分重视和关注的方面。为此，以支持决策管理分析为主要目的的OLAP(On-Line AnalyticalProcessing，联机分析处理)已成为广泛应用的分析处理方法。用户可以通过OLAP从多角度对信息进行快速、一致、交互地存取，从而获得对数据的更深入了解。

通常情况下，在进行OLAP线上分析处理时需要读取大量的数据来进行查询和处理，而目前在查询数据时无论数据量大小，均在相同的处理器中进行查询和处理，因此当存在数据量很大的查询时会占据处理器磁盘带宽，使得数据量较小的查询需要的时间很长，导致数据查询效率较低的问题。

发明内容

鉴于上述问题，本发明提供一种数据查询的分配方法及装置，主要目的在于将不同数据量的数据查询分配在不同的数据处理集群中进行查询。

为解决上述技术问题，第一方面，本发明提供了一种数据查询的分配方法，该方法包括：

接收数据查询请求，所述数据查询请求中携带有与待查询数据对应的标识信息；

根据所述标识信息，获取与所述待查询数据对应的数据量信息，所述数据量信息用于标识所述待查询数据的数据量；

按照所述数据量信息，分配与所述数据查询请求对应的数据处理集群，所述数据处理集群中包含有一个或多个能够执行数据查询操作的处理器。

可选的，所述方法还包括：

创建多个数据处理集群，其中每个数据处理集群分别用于查询不同数据量范围的数据；

配置与所述各个数据处理集群分别对应的数据量标识符，所述数据量标识符用于标识所述数据处理集群在执行数据查询操作时对应的查询数据量范围。

可选的，所述按照所述数据量信息，分配与所述数据查询请求对应的数据处理集群包括：

根据所述待查询数据对应的数据量信息确定所述待查询数据对应的数据量范围；

根据所述待查询数据对应的数据量范围和所述各个数据处理集群分别对应的数据量标识符，分配与所述数据查询请求对应的数据处理集群。

可选的，所述按照所述数据量信息，分配与所述数据查询请求对应的数据处理集群之后，所述方法还包括：

检测在所述与所述数据查询请求对应的数据处理集群中是否存在可用处理器；

若存在，则触发所述处理器对所述待查询数据进行查询；

若不存在，则将所述数据查询请求添加至等待队列，所述等待队列中保存有按照时间顺序排列的一个或多个数据查询请求。

可选的，所述方法还包括：

按照预置时间间隔，对所述处理器对应的数据查询性能进行检测；

根据检测结果对所述数据处理集群进行更新。

第二方面，本发明还提供了一种数据查询的分配装置，该装置包括：