[发明专利]一种对象聚合方法、系统、装置及计算机存储介质在审
申请号: | 202110876875.8 | 申请日: | 2021-07-31 |
公开(公告)号: | CN113687783A | 公开(公告)日: | 2021-11-23 |
发明(设计)人: | 何文龙;武模仁;胡永刚 | 申请(专利权)人: | 济南浪潮数据技术有限公司 |
主分类号: | G06F3/06 | 分类号: | G06F3/06 |
代理公司: | 北京集佳知识产权代理有限公司 11227 | 代理人: | 温可睿 |
地址: | 250101 山东省济南市自由贸易试验区*** | 国省代码: | 山东;37 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 对象 聚合 方法 系统 装置 计算机 存储 介质 | ||
1.一种对象聚合方法,其特征在于,应用于分布式对象存储系统,包括:
S11:接收小对象至存储池;所述小对象为大小满足聚合条件的对象;
S12:判断所述小对象是否为覆盖写;
S13:若是,则判断与所述小对象的OID相同的旧对象是否已经聚合;
S14:若已经聚合,则将所述旧对象的位图信息设置为无效,执行S16;
S15:若未聚合,则对所述旧对象直接覆盖写,执行S16;
S16:在所述存储池中利用所述小对象的OID和修改时间,生成与所述小对象对应的对象标记;
S17:聚合线程利用所述对象标记获取所述小对象,并对所述小对象进行聚合。
2.根据权利要求1所述的对象聚合方法,其特征在于,所述聚合线程利用所述对象标记获取所述小对象,并对所述小对象进行聚合的过程,包括:
聚合线程利用所述对象标记获取所述小对象对应的数据,并对所述小对象和其它小于512K的小文件进行聚合,得到聚合后的聚合大对象,当所述聚合大对象达到刷盘条件后,将所述聚合大对象写入OSD磁盘。
3.根据权利要求1所述的对象聚合方法,其特征在于,还包括:
删除小对象中的数据,并在小对象的头对象中添加聚合扩展属性;
删除所述存储池中所述对象标记。
4.根据权利要求1至3任一项所述的对象聚合方法,其特征在于,所述将所述旧对象的位图信息设置为无效之后,还包括:
对位图信息无效的所述旧对象进行垃圾回收操作。
5.一种对象聚合系统,其特征在于,应用于分布式对象存储系统,包括:
对象接收模块,用于接收小对象至存储池;所述小对象为大小满足聚合条件的对象;
覆盖写判断模块,用于判断所述小对象是否为覆盖写;
旧对象判断模块,用于若是,则判断与所述小对象的OID相同的旧对象是否已经聚合;
位图无效模块,用于若已经聚合,则将所述旧对象的位图信息设置为无效,调用对象标记生成模块;
覆盖写模块,用于若未聚合,则对所述旧对象直接覆盖写,调用所述对象标记生成模块;
所述对象标记生成模块,用于在所述存储池中利用所述小对象的OID和修改时间生成与所述小对象对应的对象标记;
聚合模块,用于聚合线程利用所述对象标记获取所述小对象,并对所述小对象进行聚合。
6.根据权利要求5所述的对象聚合系统,其特征在于,所述聚合模块,具体用于聚合线程利用所述对象标记获取所述小对象对应的数据,并对所述小对象和其它小于512K的小文件进行聚合,得到聚合后的聚合大对象,当所述聚合大对象达到刷盘条件后,将所述聚合大对象写入OSD磁盘。
7.根据权利要求6所述的对象聚合系统,其特征在于,还包括:
扩展属性添加模块,用于删除小对象中的数据,并在小对象的头对象中添加聚合扩展属性;
对象标记删除模块,用于删除所述存储池中所述对象标记。
8.根据权利要求5至7任一项所述的对象聚合系统,其特征在于,还包括:
回收模块,用于对位图信息无效的所述旧对象进行垃圾回收操作。
9.一种对象聚合装置,其特征在于,包括:
存储器,用于存储计算机程序;
处理器,用于执行所述计算机程序以实现如权利要求1至4任一项所述的对象聚合方法。
10.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质上存储有计算机程序,所述计算机程序被处理器执行时实现如权利要求1至4任一项所述的对象聚合方法。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于济南浪潮数据技术有限公司,未经济南浪潮数据技术有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202110876875.8/1.html,转载请声明来源钻瓜专利网。