[发明专利]一种数据对象存储管理的方法和装置有效
申请号: | 202110128451.3 | 申请日: | 2021-01-29 |
公开(公告)号: | CN112799841B | 公开(公告)日: | 2023-04-25 |
发明(设计)人: | 汤鸿飞;王振宇 | 申请(专利权)人: | 烽火通信科技股份有限公司 |
主分类号: | G06F9/50 | 分类号: | G06F9/50 |
代理公司: | 深圳市六加知识产权代理有限公司 44372 | 代理人: | 许铨芬 |
地址: | 430000 湖北省武*** | 国省代码: | 湖北;42 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 数据 对象 存储 管理 方法 装置 | ||
1.一种数据对象存储管理的方法,其特征在于:
为每个应用程序建立相应的虚拟桶,配置每个虚拟桶管理的实际桶;
虚拟桶对管理的每个实际桶进行初始化,根据数据类型配置实际桶的类型,并为每个桶分配存储范围;
虚拟桶根据实际桶的数据类型和存储范围,将数据对象存放在相应的实际桶中,其中,每个实际桶中仅存放一个数据类型的数据,每个实际桶中的数据对象类型仅与一个存储池相对应,每个实际桶中的数据存储范围连续且均等;
虚拟桶根据外部数据请求,按照需要访问的数据类型和每个实际桶的存储范围,与相应的实际桶进行数据交互,并根据实际桶中数据对象的数量建立新的实际桶和/或调整每个实际桶的存储范围,在业务空闲时段按照调整前后的实际桶存储范围进行数据迁移。
2.根据权利要求1所述的数据对象存储管理的方法,其特征在于,所述与相应的实际桶进行数据交互,还包括:
虚拟桶查找每一个实际桶在另一个对象网关节点中同名的实际桶,作为实际桶的备份桶;
当虚拟桶接收到外部数据请求时,获取每个实际桶的访问状态;
若实际桶出现访问异常,或需要访问的数据对象出现访问异常,虚拟桶将外部数据请求重定向到备份桶上。
3.根据权利要求1所述的数据对象存储管理的方法,其特征在于,若实际桶中数据对象的数量超过预定数量阈值,还包括:
建立新的实际桶,将新建实际桶分配至原实际桶所在的虚拟桶中;
根据新建实际桶的数量,重新计算虚拟桶中每个实际桶的存储范围;
根据重新计算的存储范围,将原实际桶中的数据对象迁移入对应的实际桶中。
4.根据权利要求3所述的数据对象存储管理的方法,其特征在于,所述将原实际桶中的数据对象迁移入对应的实际桶中,具体包括:
获取每个原实际桶的存储范围和每个新实际桶的存储范围;
当存入新的数据对象时,按照重新计算后的实际桶的存储范围,将数据对象存入对应的实际桶中;
当读取文件时,同时向原实际桶的存储范围所定位的实际桶和重新计算后的实际桶的存储范围所定位的实际桶发起读请求。
5.根据权利要求4所述的数据对象存储管理的方法,其特征在于,所述将原实际桶中的数据对象迁移入对应的实际桶中,还包括:
根据预设的迁移策略,查找每个实际桶中不属于重新计算后的存储范围的数据对象,并将查找到的数据对象迁移至重新计算后的存储范围对应的实际桶中;
当实际桶中所有的数据对象都按照重新计算后的存储范围分布后,在读取文件时,仅向重新计算后的存储范围所定位的实际桶发起读请求。
6.根据权利要求1所述的数据对象存储管理的方法,其特征在于,所述配置每个虚拟桶管理的实际桶,具体包括:
每个虚拟桶管理一个或多个实际桶;
每个实际桶由一个或多个虚拟桶进行管理。
7.根据权利要求1所述的数据对象存储管理的方法,其特征在于,所述与相应的实际桶进行数据交互,还包括:
判断虚拟桶中所有的实际桶的数据类型是否相同;
若相同,直接计算数据对象所在的存储范围,访问存储范围对应的实际桶;
若不同,先计算数据对象所在的存储范围,再访问每一个数据类型中存储范围对应的实际桶。
8.根据权利要求7所述的数据对象存储管理的方法,其特征在于,所述将数据对象存放在相应的实际桶中,还包括:
若数据对象的数据类型发生变化,将数据对象迁移至新数据类型对应的实际桶中,并生成相应的重定向索引。
9.根据权利要求1所述的数据对象存储管理的方法,其特征在于,所述为每个桶分配存储范围,具体包括:
使用hash算法或crush算法计算每个数据对象的索引值;
根据实际桶的数量,将数据对象索引值的范围分配至每个实际桶。
10.一种数据对象存储管理的装置,其特征在于:
包括至少一个处理器和存储器,所述至少一个处理器和存储器之间通过数据总线连接,所述存储器存储能被所述至少一个处理器执行的指令,所述指令在被所述处理器执行后,用于完成权利要求1-9中任一项所述的数据对象存储管理的方法。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于烽火通信科技股份有限公司,未经烽火通信科技股份有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202110128451.3/1.html,转载请声明来源钻瓜专利网。
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置