[发明专利]一种聚合多版本小对象的方法、装置及设备在审
申请号: | 202110962671.6 | 申请日: | 2021-08-20 |
公开(公告)号: | CN113821166A | 公开(公告)日: | 2021-12-21 |
发明(设计)人: | 何文龙;武模仁;赵煜;陶桐桐;李欢欢;胡永刚 | 申请(专利权)人: | 济南浪潮数据技术有限公司 |
主分类号: | G06F3/06 | 分类号: | G06F3/06;G06F8/71 |
代理公司: | 北京集佳知识产权代理有限公司 11227 | 代理人: | 郭化雨 |
地址: | 250101 山东省济南市中国(山东)自由贸易*** | 国省代码: | 山东;37 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 聚合 版本 对象 方法 装置 设备 | ||
本申请公开了一种聚合多版本小对象的方法、装置及设备,该方法包括:首先获取待聚合的至少一个目标多版本小对象,然后,对至少一个目标多版本小对象进行标记,并将标记记录到存储池中,接着,当获取到的目标多版本小对象的数量达到预设数量时,根据标记对目标多版本小对象进行聚合,并将得到的大对象进行存储;或者,当根据标记对目标多版本小对象进行聚合得到的大对象达到预设数值时,停止进行聚合,并将得到的大对象进行存储。从而能够减少分布式对象存储系统中小对象的存储数量,提高重构速度和兼容性,进而提高系统的存储速度。
技术领域
本申请涉及计算机技术领域,尤其涉及一种聚合多版本小对象的方法、装置及设备。
背景技术
分布式对象存储系统,指的是面向非结构化数据的分布式存储系统。现阶段,越来越多的业务场景需要使用分布式对象存储系统。
在当前的分布式对象存储系统中,针对普通海量小对象虽然已经实现了小对象聚合的功能,即,把多个小对象聚合为一个大对象,减少了Rados的对象数量,从而加快了集群的重构速度,并提高系统的性能。但每个小对象往往会对应多个版本,即,存在多版本功能,来实现对象的多版本。这样,用户可以通过记录桶内每个对象的不同版本,以便在下载时可以下载指定版本的对象。但是当前小对象聚合功能并不兼容多版本功能,从而会导致聚合后存储系统中的小对象数量仍然较多,以至于系统的存储速度较慢。因此,如何在分布式对象存储系统中,实现多版本小对象的聚合,以降低小对象的存储数量,提高系统存储速度是目前亟待解决的问题。
发明内容
本申请实施例的主要目的在于提供一种聚合多版本小对象的方法、装置及设备,能够减少分布式对象存储系统中小对象的存储数量,提高了重构速度和兼容性,进而提高了系统的存储速度。
第一方面,本申请实施例提供了一种聚合多版本小对象的方法,包括:
获取待聚合的至少一个目标多版本小对象;
对所述至少一个目标多版本小对象进行标记,并将所述标记记录到存储池中;
当获取到的所述目标多版本小对象的数量达到预设数量时,根据所述标记对所述目标多版本小对象进行聚合,并将得到的大对象进行存储;或者,当根据所述标记对所述目标多版本小对象进行聚合得到的大对象达到预设数值时,停止进行聚合,并将得到的大对象进行存储。
可选的,所述目标多版本小对象每个版本对应一个标记。
可选的,所述预设数量为400;所述预设数值为4兆字节。
可选的,所述方法还包括:
在所述大对象中的每个小对象上记录各自对应的聚合属性信息。
第二方面,本申请实施例还提供了一种聚合多版本小对象的装置,包括:
获取单元,用于获取待聚合的至少一个目标多版本小对象;
标记单元,用于对所述至少一个目标多版本小对象进行标记,并将所述标记记录到存储池中;
聚合单元,用于当获取到的所述目标多版本小对象的数量达到预设数量时,根据所述标记对所述目标多版本小对象进行聚合,并将得到的大对象进行存储;或者,当根据所述标记对所述目标多版本小对象进行聚合得到的大对象达到预设数值时,停止进行聚合,并将得到的大对象进行存储。
可选的,所述目标多版本小对象每个版本对应一个标记。
可选的,所述预设数量为400;所述预设数值为4兆字节。
可选的,所述装置还包括:
记录单元,用于在所述大对象中的每个小对象上记录各自对应的聚合属性信息。
本申请实施例还提供了一种聚合多版本小对象的设备,包括:处理器、存储器、系统总线;
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于济南浪潮数据技术有限公司,未经济南浪潮数据技术有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202110962671.6/2.html,转载请声明来源钻瓜专利网。