[发明专利]一种大数据查询方法、系统、计算机及存储介质有效
申请号: | 201711227303.7 | 申请日: | 2017-11-29 |
公开(公告)号: | CN108009236B | 公开(公告)日: | 2020-11-03 |
发明(设计)人: | 谢永恒;张德成;火一莽;万月亮 | 申请(专利权)人: | 北京锐安科技有限公司 |
主分类号: | G06F16/21 | 分类号: | G06F16/21;G06F16/25;G06F16/24 |
代理公司: | 北京品源专利代理有限公司 11332 | 代理人: | 孟金喆 |
地址: | 100044 北京市海淀区西小口*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 数据 查询 方法 系统 计算机 存储 介质 | ||
本发明实施例公开了一种大数据查询方法、系统、计算机和存储介质。其中方法包括:获取查询请求,并解析所述查询请求,确定所述查询请求的查询类型和查询数据的存储类型;根据所述查询类型和所述存储类型确定所述查询请求的查询策略,并根据所述查询策略获取查询数据;将所述查询数据汇总处理并反馈第一个独权。本发明实施例实现了为不同的形式的查询请求提供了统一的查询接口,屏蔽底层的异构数据库,提高了数据查询效率,提升了上层业务系统的开发效率,降低了上层业务系统的学习和维护成本。
技术领域
本发明实施例涉及数据查询技术,尤其涉及一种大数据查询方法、系统、计算机及存储介质。
背景技术
随着互联网、移动设备和云计算的快速发展,全球数据量大幅度提升,各行各业均出现了大数据的趋势,数据量可达TB(TeraByte)级,甚至PB(PetaByte)级。因此在传统数据库无法满足大数据应用的情况下,诞生了大量的非关系型数据库(Not Only SQL,NoSQL),例如HBase、MongeDB、Redis等,以及诸如Solr、ElasticSearch、Lucene等的搜索引擎。
随着数据类型的逐渐增多,在多种多样的数据之间构建一个超大规模的应用系统,底层数据按需存储在不同的存储介质中,对上层应用系统产生极大的挑战,导致大数据查询效率差,学习成本和维护成本飙升。
发明内容
本发明提供一种大数据查询方法、系统、计算机及存储介质,以实现提高数据查询效率,屏蔽底层的异构存储介质,为上层应用提供统一的数据服务入口。
第一方面,本发明实施例提供了一种大数据查询方法,该方法包括:
获取查询请求,并解析所述查询请求,确定所述查询请求的查询类型和查询数据的存储类型;
根据所述查询类型和所述存储类型确定所述查询请求的查询策略,并根据所述查询策略获取查询数据;
将所述查询数据汇总处理并反馈。
第二方面,本发明实施例还提供了一种大数据查询系统,该系统包括:中间件子系统、业务子系统和数据存储子系统;所述中间件子系统包括查询请求解析器、查询策略确定模块和查询数据处理模块;其中,
所述查询请求解析器用于接收所述业务子系统发送的查询请求,解析所述查询请求,生成所述查询请求的查询类型和查询数据存储类型;
所述查询策略确定模块,用于根据所述查询类型和所述查询数据存储类型生成查询策略,并根据所述查询策略将所述查询请求发送至对应的数据存储子系统;
所述数据存储子系统,用于根据所述查询请求确定查询数据,并发送至所述中间件子系统;
所述查询数据处理模块,用于将所述查询数据汇总处理并反馈至所述业务子系统。
第三方面,本发明实施例还提供了一种计算机设备,该计算机系统包括:
一个或多个处理器;
存储器,用于存储一个或多个程序;
当所述一个或多个程序被所述一个或多个处理器执行,使得所述一个或多个处理器实现本发明任意实施例提供的大数据查询方法。
第四方面,本发明实施例还提供了一种计算机存储介质,其上存储有计算机程序,该程序被处理器执行时实现本发明任意实施例提供的大数据查询方法。
本发明实施例通过统一获取业务终端的查询请求,对查询请求进行解析确定每一个查询请求的查询策略,并根据查询策略获取查询数据并反馈,实现了为不同的形式的查询请求提供了统一的查询接口,屏蔽底层的异构数据库,提高了数据查询效率。
附图说明
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京锐安科技有限公司,未经北京锐安科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201711227303.7/2.html,转载请声明来源钻瓜专利网。
- 上一篇:圆形钨片外径上限和下限检验工具
- 下一篇:一种电子政务管理信息化平台及方法
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置