[发明专利]多模态大数据系统下的数据存储方法、装置、设备和介质在审

专利信息
申请号: 202111228924.3 申请日: 2021-10-21
公开(公告)号: CN113946597A 公开(公告)日: 2022-01-18
发明(设计)人: 王建华;冷建全;张峰;柴云鹏;陈红 申请(专利权)人: 北京人大金仓信息技术股份有限公司
主分类号: G06F16/2453 分类号: G06F16/2453;G06F16/2455;G06F16/22
代理公司: 北京开阳星知识产权代理有限公司 11710 代理人: 唐博
地址: 100020 北京市朝阳区容*** 国省代码: 北京;11
权利要求书: 查看更多 说明书: 查看更多
摘要:
搜索关键词: 多模态大 数据 系统 存储 方法 装置 设备 介质
【说明书】:

本公开涉及一种多模态大数据系统下的数据存储方法、装置、设备和介质,包括:根据第一查询请求,获取与第一查询请求对应的查询数据的数据来源、数据表名称和数据存取约束条件,其中,一条查询请求至少包括一条查询数据,根据数据来源和数据表名称确定各查询数据的初始数据存储位置,根据数据存取约束条件确定各查询数据的目标数据存储位置;根据初始数据存储位置与目标数据存储位置之间的关系对查询数据的存储位置进行调整,保证周期性查询数据的效率。

技术领域

本公开涉及数据存储技术领域,尤其涉及一种多模态大数据系统下的数据存储方法、装置、设备和介质。

背景技术

近年来,大数据相关产业和技术发展迅速,数据具有多样性。例如,根据数据的来源和使用需求的不同,数据以结构化、半结构化和非结构化等各种形式呈现,相应地出现了针对各个类型的数据模型,如关系、键值、文档、图等数据模型。由于各种数据类型的存在,处理这些数据需要依赖各种数据库系统,用户如何在复杂的查询场景中针对不同类型数据实现统一查询,这一问题称为多模态数据的统一查询。

为解决多模态数据的统一查询问题,已经出现了许多多模态大数据统一查询系统,由于关系模型使用的时间最久且查询语言最为熟知,因此很多关系数据库厂商在支持原有关系数据的管理基础上,开发对其他数据模型的查询支持功能。同时随着文档、图、键值等新数据类型的发展成熟,它们与关系型数据在逻辑结构上存在相互转化的可能,这成为了实现跨模型统一查询的理论依据。根据这个理论,已经出现了许多在关系模型之上面向多种数据模型查询处理的统一引擎,这些引擎通过SQL表达、SQL解析与模型映射、SQL查询处理与优化,充分利用关系模型与非关系模型的转换,通过SQL及其扩展语言访问多种关系和非关系模型数据,以实现多模态数据的统一访问。

现有技术中进行多模态数据统一查询时,由于同样的数据以不同模型存储会带来性能上的极大影响,具有一定周期查询的查询效率较低。

发明内容

为了解决上述技术问题或者至少部分地解决上述技术问题,本公开提供了一种多模态大数据系统下的数据存储方法、装置、设备和介质,提高数据查询效率。

第一方面,本公开实施例提供了一种多模态大数据系统下的数据存储方法,包括:

根据第一查询请求,获取与所述第一查询请求对应的查询数据的数据来源、数据表名称和数据存取约束条件,其中,一条查询请求至少包括一条所述查询数据;

根据所述数据来源和所述数据表名称确定各所述查询数据的初始数据存储位置,根据所述数据存取约束条件确定各所述查询数据的目标数据存储位置;

根据所述初始数据存储位置与所述目标数据存储位置之间的关系对所述查询数据的存储位置进行调整。

可选的,所述根据所述初始数据存储位置与所述目标数据存储位置的关系确定对所述查询数据的存储位置进行调整,包括:

若确定的目标数据存储位置与初始数据存储位置一致时,保持各所述查询数据的存储位置不变;

若确定的目标数据存储位置与初始数据存储位置不一致时,获取所述查询数据在初始数据存储位置时的第一查询时间,以及所述查询数据在目标数据存储位置时的第二查询时间;

根据所述第一查询时间和所述第二查询时间之间的关系对所述查询数据的存储位置进行调整。

可选的,所述根据所述第一查询时间和所述第二查询时间之间的关系对所述查询数据的存储位置进行调整,包括:

当所述第一查询时间等于所述第二查询时间时,将所述初始数据存储位置的查询数据复制到所述目标数据存储位置;

当所述第一查询时间大于所述第二查询时间时,将所述初始数据存储位置的查询数据剪贴到所述目标数据存储位置。

下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。

该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京人大金仓信息技术股份有限公司,未经北京人大金仓信息技术股份有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服

本文链接:http://www.vipzhuanli.com/pat/books/202111228924.3/2.html,转载请声明来源钻瓜专利网。

×

专利文献下载

说明:

1、专利原文基于中国国家知识产权局专利说明书;

2、支持发明专利 、实用新型专利、外观设计专利(升级中);

3、专利数据每周两次同步更新,支持Adobe PDF格式;

4、内容包括专利技术的结构示意图流程工艺图技术构造图

5、已全新升级为极速版,下载速度显著提升!欢迎使用!

请您登陆后,进行下载,点击【登陆】 【注册】

关于我们 寻求报道 投稿须知 广告合作 版权声明 网站地图 友情链接 企业标识 联系我们

钻瓜专利网在线咨询

周一至周五 9:00-18:00

咨询在线客服咨询在线客服
tel code back_top