[发明专利]数据查询方法、装置、设备和存储介质在审
申请号: | 201910298551.3 | 申请日: | 2019-04-15 |
公开(公告)号: | CN110032575A | 公开(公告)日: | 2019-07-19 |
发明(设计)人: | 董则恒;刘柏 | 申请(专利权)人: | 网易(杭州)网络有限公司 |
主分类号: | G06F16/242 | 分类号: | G06F16/242;G06F16/248 |
代理公司: | 北京同立钧成知识产权代理有限公司 11205 | 代理人: | 朱颖;刘芳 |
地址: | 310052 浙江省*** | 国省代码: | 浙江;33 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 数据查询 元数据信息 存储介质 多数据源 客户端 数据库 服务器发送 服务器接收 系统扩展性 查询 查询结果 数据系统 解析 存储 返回 | ||
本发明实施例提供一种数据查询方法、装置、设备和存储介质,该方法包括:用户通过客户端向服务器发送了SQL查询语句,在服务器接收到该SQL查询语句之后,首先进行解析得到对应的AST,然后从AST中获取查询的数据的元数据信息,根据元数据信息从各个不同的数据库中获取到查询结果,然后返回给客户端,实现同时支持对数据系统的多数据源进行查询的功能,也不限制数据库所存储的内容,方便了用户在多数据源上进行数据查询,系统扩展性较好。
技术领域
本发明涉及数据管理技术领域,尤其涉及一种数据查询方法、装置、设备和存储介质。
背景技术
在大型企业的数据管理场景下,会根据具体的使用需求,用到各种不同的数据库系统,比如:MySQL、Hive、HBase、Oracle、Elasticsearch、MongoDB等。开发人员需要学习这些系统使用方式的学习成本较高,且使用配置不方便。
现有技术中,提供一种基于查询资源与精确度的自动路由数据库查询系统,包括结构化查询语言(Structured Query Language,SQL)标准化查询引擎模块、统一的查询入口模块、查询结果缓存模块和跨结构的数据传输模块,SQL标准化查询引擎模块包括用于提供基础数据的HIVE、用于提供对象获取和高速对象服务的HBase、用于提供数据建模和模型服务的MySQL、用于提供Cube的ElasticSearch、用于提供配置表和Meta信息的MongoDB;所述查询结果缓存模块用于统一的查询入口模块的数据缓存;所述SQL标准化查询引擎模块分别与所述统一的查询入口模块和跨结构的数据传输模块相连,通过对数据获取的类型进行引擎分割和适度使用,并将实际数据引擎向实际用户隐匿,为用户提供数据服务。
然而,上述方案中的SQL标准化查询引擎模块包括用于提供基础数据的HIVE、用于提供对象获取和高速对象服务的HBase、用于提供数据建模和模型服务的MySQL、用于提供Cube的ElasticSearch、用于提供配置表和Meta信息的MongoDB,该方法的实现时,不同类型数据库中所需要存储的数据类型的限制,导致数据系统扩展性较低。
发明内容
本发明提供一种数据查询方法、装置、设备和存储介质,用于解决现有技术中不同类型数据库中所需要存储的数据类型的限制,导致数据系统扩展性较低的问题。
本发明第一方面提供一种数据查询方法,所述方法包括:
接收客户端发送的第一SQL查询语句;
将所述第一SQL查询语句进行解析,得到对应的第一AST;
根据所述第一AST,获取所述第一SQL查询语句查询的第一数据的第一元数据信息;
根据所述第一元数据信息获取查询结果,并将所述查询结果返回所述客户端。
在一种具体的实现方式中,所述AST包括所述第一数据所属的第一表名,所述根据所述第一AST,获取所述第一SQL查询语句查询的第一数据的第一元数据信息,包括:
从所述第一AST中提取所述第一表名;
根据所述第一表名和表名与元数据信息之间的对应关系,获取所述第一元数据信息。
在一种具体的实现方式中,所述根据所述第一元数据信息获取查询结果,包括:
根据所述第一元数据信息,获取第一数据源;
通过SQL路由器进行将所述第一SQL查询语句路由到所述第一数据源;
从所述第一数据源查询获取所述查询结果,所述查询结果包括所述第一数据。
进一步地,所述方法还包括:
若所述第一数据源不支持SQL语句,则对所述第一SQL查询语句进行转换,转换为所述第一数据源支持的查询语句。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于网易(杭州)网络有限公司,未经网易(杭州)网络有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201910298551.3/2.html,转载请声明来源钻瓜专利网。
- 上一篇:SQL语句的处理方法及装置
- 下一篇:一种业务处理方法以及装置