[发明专利]数据存储方法及数据检索方法、装置、介质、电子设备有效
申请号: | 201811556083.7 | 申请日: | 2018-12-19 |
公开(公告)号: | CN109783440B | 公开(公告)日: | 2023-09-19 |
发明(设计)人: | 段林;杨小彦 | 申请(专利权)人: | 爱云保(上海)科技有限公司 |
主分类号: | G06F16/13 | 分类号: | G06F16/13;G06F16/11 |
代理公司: | 广州海藻专利代理事务所(普通合伙) 44386 | 代理人: | 张大保 |
地址: | 200050 上海市*** | 国省代码: | 上海;31 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 数据 存储 方法 检索 装置 介质 电子设备 | ||
本发明涉及虚拟化存储技术领域,揭示了一种数据存储方法及数据检索方法、装置、介质及电子设备。该方法包括:接收用户数据;将该用户数据存储到与该用户数据对应的存储文件中;对所有存储的用户数据,将属性和用户信息以及存储文件的标识存储到对应关系表中;当存储文件的大小超过预定阈值,将存储文件分裂成分裂后存储文件;然后更新对应关系表;响应于接收到检索请求,按照检索请求中数据属性和用户信息,查找对应关系表,获得存储文件标识,然后根据该存储文件标识获取用户数据。此方法下,通过将存储文件中的数据移动到多个子文件中,然后从子文件中检索,缩小了检索的范围,降低了用户数据的获取难度,提高了检索效率。
背景技术
随着互联网特别是移动互联网的发展,人类进入了信息爆炸的时代,人类产生的数据正以几何的速度倍增。大数据中蕴含着丰富的商业信息,人们对大数据给予了无限的期望,希望从中挖掘出有价值的内容。
在金融领域,经常需要对用户数据进行数据分析,以期可以为用户提供更好的产品与服务,进而获得更大的商业利益。
在现有技术的实现中,通常是将用户数据分散存储到数据库中,存储的数据杂乱无章,没有规律,不同用户的数据或者不同类型的数据杂乱地交织在一起。
现有技术的缺陷在于,在大数据处理过程中,经常需要对一种特定属性的各种数据进行处理,由于数据的存储没有章法,造成了在检索数据时需要遍历所有数据,数据获取的难度大,检索效率低下。
发明内容
在虚拟化存储技术领域,为了解决相关技术中存在检索数据效率低下的技术问题,本发明提供了一种数据存储方法及数据检索方法、装置、介质及电子设备。
根据本申请的一方面,提供了一种用户数据结构化存储方法,所述方法包括:
接收用户数据,所述用户数据具有属性和用户身份信息;
将接收到的用户数据按照预定顺序存储到与所述用户数据的属性对应的存储文件中,所述存储文件具有标识;
对所有存储到存储文件中的用户数据,将每一用户数据的属性和用户身份信息以及该用户数据所存储到的存储文件的标识对应存储到对应关系表中;
当所述存储文件的大小超过第一预定阈值,将所述存储文件分裂成多个与所述存储文件中存储的所述用户数据的属性对应的分裂后存储文件,其中每一用户数据仅存储于一个分裂后存储文件,每个分裂后存储文件的大小小于预定阈值;以及
对所有分裂后存储文件中的每一用户数据,按照该用户数据的属性和用户身份信息以及该用户数据所存储到的分裂后存储文件的标识,更新所述对应关系表。
根据本申请的另一方面,提供了一种对用数据结构化存储方法存储的用户数据进行检索的方法,所述方法包括:
响应于接收到对用户数据的检索请求,按照所述检索请求中的用户数据的属性和用户身份信息,查找所述对应关系表,获得与所述用户数据的属性和用户身份信息对应的存储文件的标识或者分裂后存储文件的标识,作为目标检索数据存储标识;
从标识为所述目标检索数据存储标识的存储文件或者分裂后存储文件中获取与所述用户数据的属性和用户身份信息对应的用户数据。
根据本申请的另一方面,提供了一种用户数据结构化存储装置,所述装置包括:
接收模块,被配置为接收用户数据,所述用户数据具有属性和用户身份信息;
第一存储模块,被配置为将接收到的用户数据按照预定顺序存储到与所述用户数据的属性对应的存储文件中,所述存储文件具有标识;
第二存储模块,被配置为对所有存储到存储文件中的用户数据,将每一用户数据的属性和用户身份信息以及该用户数据所存储到的存储文件的标识对应存储到对应关系表中;
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于爱云保(上海)科技有限公司,未经爱云保(上海)科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201811556083.7/2.html,转载请声明来源钻瓜专利网。
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置