[发明专利]全量数据的存储方法、装置以及计算机可读存储介质在审
申请号: | 202011535141.5 | 申请日: | 2020-12-22 |
公开(公告)号: | CN112527210A | 公开(公告)日: | 2021-03-19 |
发明(设计)人: | 王晓红;唐积益;黄旭辉;侯腾蛟 | 申请(专利权)人: | 南京中兴力维软件有限公司;深圳力维智联技术有限公司 |
主分类号: | G06F3/06 | 分类号: | G06F3/06 |
代理公司: | 深圳市恒程创新知识产权代理有限公司 44542 | 代理人: | 张小容 |
地址: | 210008 江苏省南京*** | 国省代码: | 江苏;32 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 数据 存储 方法 装置 以及 计算机 可读 介质 | ||
1.一种全量数据的存储方法,其特征在于,所述全量数据的存储方法包括:
获取多个全量数据,提取每个所述全量数据中的关键词以及所述关键词对应的特征值;
根据所述关键词以及所述特征值生成所述全量数据对应的字段,并根据各个所述字段生成数据文档;
将所述数据文档存储在第一存储空间。
2.如权利要求1所述的全量数据的存储方法,其特征在于,所述全量数据包括文字信息以及图片信息,所述根据所述关键词以及所述特征值生成所述全量数据对应的字段的步骤包括:
获取所述图片信息对应的存储路径;
根据所述关键词、所述特征值以及所述存储路径生成所述全量数据对应的字段,其中,所述关键词以及所述特征值根据所述文字信息确定。
3.如权利要求2所述的全量数据的存储方法,其特征在于,所述获取所述图像信息对应的存储路径的步骤包括:
提取所述全量数据中的所述图片信息,将所述图片信息转换为数据文件;
将所述数据文件发送至服务器,所述服务器将所述数据文件进行存储,并生成所述数据文件对应的存储路径;
接收所述服务器反馈的所述图片信息对应的存储路径。
4.如权利要求1所述的全量数据的存储方法,其特征在于,所述将所述数据文档存储在预设的第一存储空间的步骤之后,还包括:
创建所述数据文档对应的索引,并建立所述索引与所述数据文档的映射关系,所述索引包括所述索引的创建时间。
5.如权利要求4所述的全量数据的存储方法,其特征在于,所述创建所述数据文档对应的索引的步骤包括:
确定所述数据文档的分片参数以及副本参数;
根据所述分片参数、所述副本参数以及当前时间创建所述索引,其中,所述当前时间为所述索引的创建时间。
6.如权利要求4所述的全量数据的存储方法,其特征在于,所述建立所述索引与所述数据文档的映射关系的步骤包括:
获取所述索引在预设时长内的检索频次;
若所述检索频次小于预设频次,删除所述检索频次对应的所述索引以及所述索引对应的数据文档。
7.如权利要求1所述的全量数据的存储方法,其特征在于,所述将所述数据文档存储在第一存储空间的步骤之后,还包括:
生成所述全量数据对应的标识;
将所述标识与所述数据文档关联,以排序于第一存储空间内的列表的末尾,其中,所述列表包括多组按照时间从早到晚排序的目标数据,所述目标数据包括所述数据文档以及所述数据文档关联的标识。
8.如权利要求1所述的全量数据的存储方法,其特征在于,所述将所述数据文档存储在第一存储空间的步骤之后,还包括:
获取所述数据文档在预设时长内的访问频次;
在所述访问频次小于预设频次,将所述数据文档存储于第二存储空间中,所述第二存储空间的硬件配置低于所述第一存储空间的硬件配置;
删除所述第一存储空间中的所述数据文档。
9.一种全量数据的存储装置,其特征在于,所述全量数据的存储装置包括存储器、处理器以及存储在所述存储器并可在所述处理器上执行的全量数据的存储程序,所述全量数据的存储程序被所述处理器执行时实现如权利要求1-8任一项所述的全量数据的存储方法的各个步骤。
10.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质存储有全量数据的存储程序,所述全量数据的存储程序被处理器执行时实现如权利要求1-8任一项所述的全量数据的存储方法的各个步骤。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于南京中兴力维软件有限公司;深圳力维智联技术有限公司,未经南京中兴力维软件有限公司;深圳力维智联技术有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202011535141.5/1.html,转载请声明来源钻瓜专利网。
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置