[发明专利]多模态大数据系统下的数据存储方法、装置、设备和介质在审
申请号: | 202111228924.3 | 申请日: | 2021-10-21 |
公开(公告)号: | CN113946597A | 公开(公告)日: | 2022-01-18 |
发明(设计)人: | 王建华;冷建全;张峰;柴云鹏;陈红 | 申请(专利权)人: | 北京人大金仓信息技术股份有限公司 |
主分类号: | G06F16/2453 | 分类号: | G06F16/2453;G06F16/2455;G06F16/22 |
代理公司: | 北京开阳星知识产权代理有限公司 11710 | 代理人: | 唐博 |
地址: | 100020 北京市朝阳区容*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 多模态大 数据 系统 存储 方法 装置 设备 介质 | ||
本公开涉及一种多模态大数据系统下的数据存储方法、装置、设备和介质,包括:根据第一查询请求,获取与第一查询请求对应的查询数据的数据来源、数据表名称和数据存取约束条件,其中,一条查询请求至少包括一条查询数据,根据数据来源和数据表名称确定各查询数据的初始数据存储位置,根据数据存取约束条件确定各查询数据的目标数据存储位置;根据初始数据存储位置与目标数据存储位置之间的关系对查询数据的存储位置进行调整,保证周期性查询数据的效率。
技术领域
本公开涉及数据存储技术领域,尤其涉及一种多模态大数据系统下的数据存储方法、装置、设备和介质。
背景技术
近年来,大数据相关产业和技术发展迅速,数据具有多样性。例如,根据数据的来源和使用需求的不同,数据以结构化、半结构化和非结构化等各种形式呈现,相应地出现了针对各个类型的数据模型,如关系、键值、文档、图等数据模型。由于各种数据类型的存在,处理这些数据需要依赖各种数据库系统,用户如何在复杂的查询场景中针对不同类型数据实现统一查询,这一问题称为多模态数据的统一查询。
为解决多模态数据的统一查询问题,已经出现了许多多模态大数据统一查询系统,由于关系模型使用的时间最久且查询语言最为熟知,因此很多关系数据库厂商在支持原有关系数据的管理基础上,开发对其他数据模型的查询支持功能。同时随着文档、图、键值等新数据类型的发展成熟,它们与关系型数据在逻辑结构上存在相互转化的可能,这成为了实现跨模型统一查询的理论依据。根据这个理论,已经出现了许多在关系模型之上面向多种数据模型查询处理的统一引擎,这些引擎通过SQL表达、SQL解析与模型映射、SQL查询处理与优化,充分利用关系模型与非关系模型的转换,通过SQL及其扩展语言访问多种关系和非关系模型数据,以实现多模态数据的统一访问。
现有技术中进行多模态数据统一查询时,由于同样的数据以不同模型存储会带来性能上的极大影响,具有一定周期查询的查询效率较低。
发明内容
为了解决上述技术问题或者至少部分地解决上述技术问题,本公开提供了一种多模态大数据系统下的数据存储方法、装置、设备和介质,提高数据查询效率。
第一方面,本公开实施例提供了一种多模态大数据系统下的数据存储方法,包括:
根据第一查询请求,获取与所述第一查询请求对应的查询数据的数据来源、数据表名称和数据存取约束条件,其中,一条查询请求至少包括一条所述查询数据;
根据所述数据来源和所述数据表名称确定各所述查询数据的初始数据存储位置,根据所述数据存取约束条件确定各所述查询数据的目标数据存储位置;
根据所述初始数据存储位置与所述目标数据存储位置之间的关系对所述查询数据的存储位置进行调整。
可选的,所述根据所述初始数据存储位置与所述目标数据存储位置的关系确定对所述查询数据的存储位置进行调整,包括:
若确定的目标数据存储位置与初始数据存储位置一致时,保持各所述查询数据的存储位置不变;
若确定的目标数据存储位置与初始数据存储位置不一致时,获取所述查询数据在初始数据存储位置时的第一查询时间,以及所述查询数据在目标数据存储位置时的第二查询时间;
根据所述第一查询时间和所述第二查询时间之间的关系对所述查询数据的存储位置进行调整。
可选的,所述根据所述第一查询时间和所述第二查询时间之间的关系对所述查询数据的存储位置进行调整,包括:
当所述第一查询时间等于所述第二查询时间时,将所述初始数据存储位置的查询数据复制到所述目标数据存储位置;
当所述第一查询时间大于所述第二查询时间时,将所述初始数据存储位置的查询数据剪贴到所述目标数据存储位置。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京人大金仓信息技术股份有限公司,未经北京人大金仓信息技术股份有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202111228924.3/2.html,转载请声明来源钻瓜专利网。
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置