[发明专利]用于预计算系统中查询引擎的动态路由方法及装置有效
申请号: | 201910258123.8 | 申请日: | 2019-04-01 |
公开(公告)号: | CN110110165B | 公开(公告)日: | 2021-04-02 |
发明(设计)人: | 马洪宾;李扬;韩卿 | 申请(专利权)人: | 跬云(上海)信息科技有限公司 |
主分类号: | G06F16/903 | 分类号: | G06F16/903;G06F16/906 |
代理公司: | 北京知果之信知识产权代理有限公司 11541 | 代理人: | 唐海力 |
地址: | 200120 上海市浦东新区中国(*** | 国省代码: | 上海;31 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 用于 预计 系统 查询 引擎 动态 路由 方法 装置 | ||
本申请公开了一种用于预计算系统中查询引擎的动态路由方法及装置。该方法包括预先获取预计算系统中预设维度组合下的立方体数据;在接收查询请求后,判断按照预期选中的所述预设维度组合下的立方体数据的聚合程度;在所述预设维度组合下的立方体数据的聚合程度为高时,在第一分布式查询引擎对所述查询请求执行查询处理;以及在所述预设维度组合下的立方体数据的聚合程度为低时,切换至第二分布式查询引擎对所述查询请求执行查询处理。本申请解决了预计算查询系统的查询响应速度并不理想的技术问题。通过本申请,可以实现亚秒级高性能的查询响应。同时作为结果可以支撑更高的高并发以满足业务需求,同时保证查询系统的稳定性。
技术领域
本申请涉及计算机、数据分析领域,具体而言,涉及一种用于预计算系统中查询引擎的动态路由方法及装置。
背景技术
预计算查询系统,能够利用空余的计算、存储资源提前完成部分的计算,并且将这些计算结果保存在可持久化的存储介质中,当用户查询到来的时候,只需要进行少量的数据再加工便可以回答用户的查询。
发明人发现,在分布式计算环境中,预计算查询系统的查询响应速度仍然不理想。进一步,对预计算结果的利用也较差。
针对相关技术中预计算查询系统的查询响应速度并不理想的问题,目前尚未提出有效的解决方案。
发明内容
本申请的主要目的在于提供一种用于预计算系统中查询引擎的动态路由方法及装置,以解决预计算查询系统的查询响应速度并不理想的问题。
为了实现上述目的,根据本申请的一个方面,提供了一种用于预计算系统中查询引擎的动态路由方法。
根据本申请的用于预计算系统中查询引擎的动态路由方法包括:
预先获取预计算系统中预设维度组合下的立方体数据;
在接收查询请求后,判断按照预期选中的所述预设维度组合下的立方体数据的聚合程度;
在所述预设维度组合下的立方体数据的聚合程度为高时,在第一分布式查询引擎对所述查询请求执行查询处理;以及
在所述预设维度组合下的立方体数据的聚合程度为低时,切换至第二分布式查询引擎对所述查询请求执行查询处理。
进一步地,在接收查询请求后,判断按照预期选中的所述预设维度组合下的立方体数据的聚合程度时还包括:评估执行所述查询请求的代价结果;当按照预期选中的所述预设维度组合下的立方体数据相同和/或重叠时,根据所述代价结果调整选用所述第一分布式查询引擎或所述第二分布式查询引擎。
进一步地,在所述预设维度组合下的立方体数据的聚合程度为高时,在第一分布式查询引擎对所述查询请求执行查询处理包括:在所述预设维度组合下的立方体数据的聚合程度为高时,在Scatter-and-gather第一分布式查询引擎对所述查询请求执行查询处理。
进一步地,在所述预设维度组合下的立方体数据的聚合程度为低时,切换至第二分布式查询引擎对所述查询请求执行查询处理包括:在所述预设维度组合下的立方体数据的聚合程度为低时,切换至total-exchange第二分布式查询引擎对所述查询请求执行查询处理。
进一步地,在所述预设维度组合下的立方体数据的聚合程度为低时,切换至第二分布式查询引擎对所述查询请求执行查询处理之后还包括:在再次接收到查询请求后,判断按照预期选中的所述预设维度组合下的立方体数据的聚合程度;在所述预设维度组合下的立方体数据的聚合程度由低变为高时,切换至第一分布式查询引擎对所述查询请求执行查询处理。
为了实现上述目的,根据本申请的另一方面,提供了一种用于预计算系统中查询引擎的动态路由装置。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于跬云(上海)信息科技有限公司,未经跬云(上海)信息科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201910258123.8/2.html,转载请声明来源钻瓜专利网。