[发明专利]存储方法、装置、计算机设备和存储介质有效
申请号: | 201911418326.5 | 申请日: | 2019-12-31 |
公开(公告)号: | CN111158606B | 公开(公告)日: | 2020-11-03 |
发明(设计)人: | 娄永杰;马立珂;王子骏 | 申请(专利权)人: | 广州鼎甲计算机科技有限公司 |
主分类号: | G06F3/06 | 分类号: | G06F3/06;G06F16/172;G06F16/182 |
代理公司: | 广州华进联合专利商标代理有限公司 44224 | 代理人: | 毛丹 |
地址: | 510670 广东省广州市广州*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 存储 方法 装置 计算机 设备 介质 | ||
1.一种存储方法,其特征在于,所述方法包括:
根据原始文件获取多个数据块;
获取各所述数据块的数据类型,若所述数据块的数据类型为有效数据,将所述数据块上传至对象存储系统中与所述数据块对应的数据对象中,并在元数据文件中的数据块信息部中记录所述数据块对应的第一数据块信息;所述第一数据块信息包括有效数据块标识,数据块编号,数据块大小、数据块在所述原始文件中的第一偏移、对应的数据对象的数据对象标识及在所述数据对象中的第二偏移,所述第一偏移用于表征所述数据块的开始字节在所述原始文件中的位置;若所述数据块的数据类型为无效数据,则停止上传所述数据块至所述对象存储系统,并在所述元数据文件中的数据块信息部中记录所述数据块的第二数据块信息,所述第二数据块信息包括无效数据块标识,数据块编号,数据块大小、数据块在所述原始文件中的第一偏移;在各所述数据块上传完成后,将所述元数据文件上传至所述对象存储系统,并作为元数据对象。
2.根据权利要求1所述的方法,其特征在于,所述将所述数据块上传至对象存储系统中与所述数据块对应的数据对象中,包括:
将所述数据块上传至所述对象存储系统中的当前数据对象,作为所述当前数据对象的分片,并记录所述当前数据对象的分片数;
若所述当前数据对象的分片数达到预设的分片阈值或所述数据块为最后一个需要上传的数据块,发送合并指令至所述对象存储系统,并获取新的初始数据对象作为当前数据对象;所述合并指令用于将所述当前数据对象中的分片合并为所述数据对象。
3.根据权利要求1至2任一项所述的方法,其特征在于,在各所述数据块上传完成后,及在所述将所述元数据文件上传至所述对象存储系统,并作为元数据对象的步骤之前,所述方法还包括:
根据各所述数据块在所述原始文件中的第一偏移,生成各所述数据块对应的索引信息;
将各所述数据块对应的索引信息保存至所述元数据文件中的索引信息部。
4.根据权利要求3所述的方法,其特征在于,所述方法还包括:
获取对所述原始文件中待读取数据的读取请求,所述读取请求包括待读取数据在所述原始文件中的起始偏移及结束偏移;
根据所述起始偏移及所述结束偏移,在所述元数据文件中获取至少一个待读取数据块;
根据各所述待读取数据块的数据块信息,所述起始偏移及所述结束偏移,获取各所述待读取数据块中的待读取子数据;
根据各所述待读取数据块中的待读取子数据确定所述待读取数据。
5.根据权利要求4所述的方法,其特征在于,所述根据所述起始偏移及所述结束偏移,在所述元数据文件中获取至少一个待读取数据块,包括:
若所述元数据文件中包括索引信息部,在所述索引信息部中获取所述起始偏移对应的起始索引信息及所述结束偏移对应的结束索引信息,根据所述起始索引信息及所述结束索引信息在所述索引信息部中确定所述至少一个待读取数据块。
6.根据权利要求5所述的方法,其特征在于,所述根据所述起始偏移及所述结束偏移,在所述元数据文件中获取至少一个待读取数据块,包括:
若所述元数据文件中不包括索引信息部,获取所述数据块信息部中各数据块的第一偏移及数据块大小,确定各所述数据块对应的数据块起始偏移及数据块结束偏移;根据各所述数据块对应的数据块起始偏移及数据块结束偏移,与所述起始偏移及所述结束偏移的位置关系,确定所述至少一个待读取数据块。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于广州鼎甲计算机科技有限公司,未经广州鼎甲计算机科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201911418326.5/1.html,转载请声明来源钻瓜专利网。
- 上一篇:一种距离判断方法
- 下一篇:即时通讯群的排名方法、装置、设备及存储介质