[发明专利]多源异构数据的处理方法、计算机设备及存储介质在审
申请号: | 202210300339.8 | 申请日: | 2022-03-25 |
公开(公告)号: | CN114756577A | 公开(公告)日: | 2022-07-15 |
发明(设计)人: | 姚宏宇;朱朝强 | 申请(专利权)人: | 北京友友天宇系统技术有限公司 |
主分类号: | G06F16/2453 | 分类号: | G06F16/2453;G06F16/242;G06F16/28;G06F16/2455 |
代理公司: | 上海市锦天城律师事务所 31273 | 代理人: | 汪妍瑜 |
地址: | 100193 北京市海淀*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 多源异构 数据 处理 方法 计算机 设备 存储 介质 | ||
本发明公开了一种多源异构数据的处理方法、计算机设备及存储介质,包括:与多个异构的数据源建立连接,获取数据源的数据源元数据;根据连接的数据源中的物理库进行映射,得到逻辑库;根据逻辑库确定逻辑库元数据,逻辑库元数据包括逻辑库;通过内存缓存存储数据源元数据和逻辑库元数据;根据数据源元数据和逻辑库元数据对SQL语句进行响应,反馈查询结果。由于逻辑库、数据源元数据以及逻辑库元数据存储于内存缓存,使内存缓存无需存储数据源中的物理表,提高内存缓存的利用率,同时由于内存缓存具有较高的数据读写效率,因此能够快速的对SQL语句进行响应,提高多源异构数据的查询效率。
技术领域
本发明实施例涉及信息处理技术,尤其涉及一种多源异构数据的处理方法、计算机设备及存储介质。
背景技术
数据库是一个按数据结构来存储和管理数据的计算机软件系统。随着数据库的发展,数据库种类不断增多,不同类型的数据库适用于存储不同类型的数据内容。不同类型的数据库适配的结构化查询语言(Structured Query Language,SQL)语句存在差别。为了方便说明,后续将SQL语句称为SQL语句。
多源异构数据的查询为在多个存储有不同数据类型或数据结构的数据库之间进行的查询。通常,需要分别使用各数据库适配的SQL语句向服务器发起查询,服务器将该查询语句转发至相应的数据库的查询引擎后进行SQL语句的响应。目前缺少一种能够快速响应涉及多个数据库的SQL语句的方案,如何提高多数据库查询的SQL语句响应速度,成为亟待解决的技术问题。
发明内容
本发明提供一种多源异构数据的处理方法、计算机设备及存储介质,以实现提高多数据库查询的SQL语句响应速度。
第一方面,本发明实施例提供了一种多源异构数据的处理方法,其特征在于,包括:
与多个异构的数据源建立连接,获取数据源的数据源元数据;
根据连接的数据源中的物理库进行映射,得到逻辑库;
根据逻辑库确定逻辑库元数据,逻辑库元数据包括逻辑库;
通过内存缓存存储数据源元数据和逻辑库元数据;
根据数据源元数据和逻辑库元数据对SQL语句进行响应,反馈查询结果。
第二方面,本发明实施例还提供了一种多源异构数据的处理装置,其特征在于,包括:
内存缓存控制模块,用于与多个异构的数据源建立连接;获取数据源的数据源元数据;根据连接的数据源中的物理库进行映射,得到逻辑库;根据逻辑库确定逻辑库元数据,逻辑库元数据包括逻辑库;
内存缓存模块,用于存储逻辑库、数据源元数据和逻辑库元数据;
应用客户端模块,用于接收SQL语句;
查询引擎模块,用于根据数据源元数据和逻辑库元数据对SQL语句进行响应,反馈查询结果。
第三方面,本发明实施例还提供了一种计算机设备,包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序,处理器执行程序时实现如本发明实施例提供的多源异构数据的处理方法。
第四方面,本发明实施例还提供了一种包含计算机可执行指令的存储介质,计算机可执行指令在由计算机处理器执行时用于执行如本发明实施例提供的多源异构数据的处理方法。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京友友天宇系统技术有限公司,未经北京友友天宇系统技术有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202210300339.8/2.html,转载请声明来源钻瓜专利网。
- 上一篇:生物安全柜
- 下一篇:结构化查询语句的多层解析方法、计算机设备及存储介质
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置