[发明专利]一种数据查询方法及装置

说明书

本发明提供了一种数据查询方法及装置，涉及数据查询技术领域。其中，所述方法包括：接收客户端的数据查询请求；获取各个数据集群的数据写入进度参数、可用性参数、一致性参数；根据所述各个数据集群的数据写入进度参数、可用性参数、一致性参数，选择目标数据集群；将所述数据查询请求发送至所述目标数据集群；接收所述目标数据集群返回的所述数据查询请求对应的查询结果，并将所述查询结果返回给所述客户端。本发明实施例，选择了可提供数据查询服务，且写入速度快、准确性高的数据集群，作为目标数据集群，后续通过该目标数据集群，为客户端返回查询结果，可以为客户端，提供实时性好、准确率高的查询结果。

技术领域

本发明涉及数据查询技术领域，特别是涉及一种数据查询的方法及装置。

背景技术

随着数据集群技术的发展，数据集群中的数据量规模越来越大，通过对数据集群中的实时数据进行数据挖掘，可以获取更大的价值，因此，对实时数据进行处理的需求也越来越多。

在数据集群中对实时数据进行处理中，通常主要考虑数据集群的负载程度、访问量等因素，进而确定合适的数据集群，提供数据服务。

发明人在研究上述现有技术的过程中发现，上述现有技术方案存在如下缺点：在选择某一个数据集群，提供数据服务过程中，考虑的因素比较单一、确定过程没有针对性的考虑使用要求，导致最终确定的数据集群，可能不是需要的性能最优的数据集群。

发明内容

本发明提供一种数据查询的方法及装置，旨在针对具体的数据查询请求，选择性能最优的数据集群，提供数据查询服务。

第一方面，本发明实施例提供了一种数据查询的方法，所述方法包括：

接收客户端的数据查询请求；

获取各个数据集群的数据写入进度参数、可用性参数、一致性参数；

根据所述各个数据集群的数据写入进度参数、可用性参数、一致性参数，选择目标数据集群；

将所述数据查询请求发送至所述目标数据集群；

接收所述目标数据集群返回的所述数据查询请求对应的查询结果，并将所述查询结果返回给所述客户端。

优选的，所述获取各个数据集群的数据写入进度参数、可用性参数、一致性参数包括：

根据所述各个数据集群分别对实时日志数据流的写入情况，对应确定所述各个数据集群的数据写入进度参数；

根据所述各个数据集群的实时状态，对应确定所述各个数据集群的可用性参数；

根据所述各个数据集群中计算的离线数据，和所述各个数据集群对应存储的实时数据，对应确定所述各个数据集群的一致性参数。

优选的，所述根据所述各个数据集群的数据写入进度参数、可用性参数、一致性参数，选择目标数据集群的步骤，包括：

根据所述可用性参数，在所述各个数据集群中，选择可用的第二数据集群；

从所述第二数据集群中，选择所述一致性参数超过第一阈值的第三数据集群；

从所述第三数据集群中，选择所述数据写入进度参数超过第二阈值的所述目标数据集群。

优选的，所述数据查询请求包括：查询时间段；所述获取各个数据集群的数据写入进度参数、可用性参数、一致性参数包括：

根据所述各个数据集群的离线数据和实时数据存储时间段的实时划分，确定所述查询时间段中，需要在所述实时数据存储时间段查询的第一时间段；

获取所述各个数据集群所述第一时间段的数据写入进度参数、可用性参数、一致性参数。