[发明专利]基于对象存储系统的数据存储方法及装置、电子设备在审
申请号: | 202010705650.1 | 申请日: | 2020-07-21 |
公开(公告)号: | CN111857592A | 公开(公告)日: | 2020-10-30 |
发明(设计)人: | 张宏瑞;张旭明;王豪迈;胥昕 | 申请(专利权)人: | 星辰天合(北京)数据科技有限公司 |
主分类号: | G06F3/06 | 分类号: | G06F3/06;G06F16/901 |
代理公司: | 北京康信知识产权代理有限责任公司 11240 | 代理人: | 董文倩 |
地址: | 100097 北京市海淀区蓝*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 基于 对象 存储系统 数据 存储 方法 装置 电子设备 | ||
1.一种基于对象存储系统的数据存储方法,其特征在于,所述对象存储系统上包含多个对象存储节点,数据存储方法包括:
获取对象存储节点上的硬盘数量;
基于所述硬盘数量创建不同数据安全类型的存储池;
基于所述存储池,创建对象存储策略,其中,所述存储策略用于指示对象数据的读写规则;
基于所述对象存储策略执行对象数据的存储。
2.根据权利要求1所述的数据存储方法,其特征在于,所述数据安全类型包括:多副本类型和纠删码类型。
3.根据权利要求1所述的数据存储方法,其特征在于,在创建所述对象存储策略时,确定对象索引池和缓存池,其中,所述对象索引池用于存储对象元数据,所述缓存池用于缓存对象数据。
4.根据权利要求1所述的数据存储方法,其特征在于,所述对象存储策略中包括:活动数据池和非活动数据池,多个所述活动数据池组合为活动池组,其中,所述活动数据池用于指示读写频率高于预设频率阈值的存储池,所述非活动数据池用于指示读写频率低于等于预设频率阈值的访问频率的存储池。
5.根据权利要求4所述的数据存储方法,其特征在于,基于所述对象存储策略执行对象数据的存储的步骤,包括:
基于所述对象存储策略,创建存储桶,其中,所述存储桶用于写入对象数据,以实现所述对象数据的存储。
6.根据权利要求5所述的数据存储方法,其特征在于,在对象数据写入至所述存储桶中的活动数据池后,更新对象索引信息,其中,所述对象索引信息用于记录所述对象数据的写入位置。
7.根据权利要求4所述的数据存储方法,其特征在于,在基于所述对象存储策略执行对象数据的存储之后,所述数据存储方法还包括:
设置所述活动池组中每个所述活动数据池的多个属性参数,其中,所述属性参数至少包括:写权重、写入次数;
基于所述多个属性参数,计算每个活动数据池的对象写入系数;
对所有的对象写入系数进行排序,得到排序结果;
基于所述排序结果,将对象写入系数最小的活动数据池作为当前写入数据池。
8.根据权利要求7所述的数据存储方法,其特征在于,在设定所述活动数据池的多个属性参数之后,所述数据存储方法还包括:
若更新所述对象存储策略或者将对象存储网关重启,则重新设置所述属性参数。
9.根据权利要求4所述的数据存储方法,其特征在于,在基于所述对象存储策略执行对象数据的存储之后,所述数据存储方法还包括:
判断每个活动数据池的可用容量;
若所述可用容量低于预设容量阈值,将所述活动数据池设置为非活动数据池,并发出容量告警信号;
在发出所述容量告警信号后,新建存储池,得到新存储池;
将所述新存储池加入至发出容量告警信号的活动数据池所在的活动池组中,以作为新的活动数据池;
在确定新的活动数据池后,基于所述活动池组中每个所述活动数据池的当前可用空间重新设置每个所述活动数据池的属性参数。
10.根据权利要求4所述的数据存储方法,其特征在于,在基于所述对象存储策略执行对象数据的存储之后,所述数据存储方法还包括:
按照预设时间间隔周期,检测所述活动池组中每个所述活动数据池的可用空间;
基于每个所述活动数据池的可用空间,更新每个所述活动数据池的可用容量比;
基于所述可用容量比,更新每个所述活动数据池的写入权重值。
11.根据权利要求4所述的数据存储方法,其特征在于,在基于所述对象存储策略执行对象数据的存储之后,所述数据存储方法还包括:
接收故障信息,其中,所述故障信息用于指示活动数据池中的硬盘出现故障;
基于所述故障信息,确定故障活动数据池以及故障硬盘;
基于活动活动数据池之间的资源互相隔离规则,更换故障活动数据池中的故障硬盘。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于星辰天合(北京)数据科技有限公司,未经星辰天合(北京)数据科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202010705650.1/1.html,转载请声明来源钻瓜专利网。
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置