[发明专利]一种对象数据的存储方法、装置及介质在审
申请号: | 202211000165.X | 申请日: | 2022-08-19 |
公开(公告)号: | CN115525219A | 公开(公告)日: | 2022-12-27 |
发明(设计)人: | 程晓煜;陶桐桐 | 申请(专利权)人: | 济南浪潮数据技术有限公司 |
主分类号: | G06F3/06 | 分类号: | G06F3/06 |
代理公司: | 北京集佳知识产权代理有限公司 11227 | 代理人: | 李赫 |
地址: | 250101 山东省济南市自由贸易试验区*** | 国省代码: | 山东;37 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 对象 数据 存储 方法 装置 介质 | ||
1.一种对象数据的存储方法,其特征在于,包括:
获取前端业务写入本地系统的待聚合的对象数据;
将所述对象数据的数据部分保存至AEP文件中,其中,所述对象数据包括所述数据部分和元数据部分;
控制聚合线程遍历所述AEP文件内的所述对象数据;
当所述对象数据满足聚合要求时,对满足所述聚合要求的对象数据聚合为rados对象,并下刷至HDD盘中以便完成所述对象数据的存储。
2.根据权利要求1所述的对象数据的存储方法,其特征在于,在所述获取前端业务写入本地系统的待聚合的对象数据之前,还包括:
接收写入所述本地系统的初始对象数据以及对应的存储字节;
判断所述初始对象数据的存储字节是否小于或等于预设存储字节;
若是,则确定所述初始对象数据为所述待聚合的对象数据。
3.根据权利要求2所述的对象数据的存储方法,其特征在于,所述聚合要求为所述对象数据的存储字节等于存储阈值,其中所述存储阈值大于所述预设存储字节,确定所述对象数据满足所述聚合要求,包括:
获取所述AEP文件的所述对象数据对应的存储字节;
选取前N个所述对象数据并统计所述前N个所述对象数据的存储字节;
判断所述前N个所述对象数据的存储字节是否达到所述存储阈值;
若是,则确定所述前N个所述对象数据满足所述聚合要求;
若否,则选取第N+1个所述对象数据,并将前N+1个所述对象数据作为新的所述前N个所述对象数据,并返回至所述选取前N个所述对象数据并统计所述前N个所述对象数据的存储字节的步骤,直至将所述聚合任务内的所述对象数据的存储字节满足所述聚合要求。
4.根据权利要求1至3任意一项所述的对象数据的存储方法,其特征在于,还包括:
获取所述对象数据的所述数据部分在所述AEP文件的位置信息以及偏移量;
将所述位置信息、所述偏移量与所述对象数据的所述元数据部分存储至NVME盘;
其中,将所述元数据部分存储至所述NVME盘,包括:
根据桶ID与对象名的映射方式将所述元数据部分存储至所述NVME盘。
5.根据权利要求4所述的对象数据的存储方法,其特征在于,还包括:
获取待读取对象数据;
根据所述待读取对象数据的桶ID以及对象名在所述NVME盘中查找对应的radios对象;
根据所述待读取对象数据的radios对象的元数据部分查找所述待读取对象数据的数据部分的位置信息;
判断所述待读取对象数据的当前状态是否为聚合状态;
若是,则在所述HDD盘中根据所述位置信息读写所述待读取对象数据的数据部分;
若否,则在所述AEP文件中根据所述位置信息读写所述待读取对象数据的数据部分。
6.根据权利要求5所述的对象数据的存储方法,其特征在于,在所述将所述对象数据的数据部分保存至AEP文件中之后,还包括:
将所述对象数据对应的记录信息保存至所述AEP文件中,以便于所述对象数据的存储过程掉电重启,遍历所述AEP文件的所述记录信息并读取至内存。
7.根据权利要求6所述的对象数据的存储方法,其特征在于,在对满足所述聚合要求的所述对象数据聚合为所述rados对象,并下刷至所述HDD盘之后,还包括:
修改所述rados对象对应的所述对象数据的元数据部分、对应的所述位置信息和所述偏移量并存储至所述NVME盘;
删除所述AEP文件中所述rados对象的所述对象数据以及所述记录信息。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于济南浪潮数据技术有限公司,未经济南浪潮数据技术有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202211000165.X/1.html,转载请声明来源钻瓜专利网。
- 上一篇:便携式输液装置及系统
- 下一篇:一种航天器激光时频传递载荷热控系统
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置