[发明专利]一种ceph中数据存储方法及装置有效
申请号: | 201810499960.5 | 申请日: | 2018-05-23 |
公开(公告)号: | CN108829738B | 公开(公告)日: | 2020-12-25 |
发明(设计)人: | 韩庆波 | 申请(专利权)人: | 北京奇艺世纪科技有限公司 |
主分类号: | G06F16/13 | 分类号: | G06F16/13;G06F16/172;G06F16/182;G06F11/00;G06F11/07 |
代理公司: | 北京柏杉松知识产权代理事务所(普通合伙) 11413 | 代理人: | 项京;马敬 |
地址: | 100080 北京市海淀区*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 ceph 数据 存储 方法 装置 | ||
1.一种分布式文件系统ceph中数据存储方法,其特征在于,所述方法包括:
获取存储设备集群的拓扑结构,所述存储设备集群包括多个存储设备,所述拓扑结构表示所述存储设备集群的物理故障域的划分情况;
将所述存储设备集群的每个物理故障域均划分为多个虚拟故障子域;
针对每个存储业务的待存储副本数据,基于需要存储的副本数据的第一数量,选择所述第一数量个虚拟故障子域作为存储故障域,所选择的存储故障域中的不同虚拟故障子域属于不同物理故障域,且针对不同存储业务所选择的虚拟故障子域均不同;
将所述每个存储业务的待存储副本数据,分别存储于该存储业务对应的每个存储故障域的存储设备中。
2.根据权利要求1所述的方法,其特征在于,在所述选择所述第一数量个虚拟故障子域作为存储故障域之前,还包括:
将得到的虚拟故障子域划分为多组虚拟故障子域,且每组虚拟故障子域中的不同虚拟故障子域属于不同物理故障域;
所述选择所述第一数量个虚拟故障子域作为存储故障域,包括:
从所述多组虚拟故障子域中的一组虚拟故障子域中,选择所述第一数量个虚拟故障子域作为存储故障域。
3.根据权利要求1所述的方法,其特征在于,所述方法还包括:
基于新增的需要存储副本数据的新存储业务的业务数量,将每个物理故障域中未存储副本数据的存储设备均划分为所述业务数量个子存储域;
针对每个新存储业务的待存储副本数据,基于需要存储的副本数据的第二数量,选择所述第二数量个子存储域作为扩容存储域,所选择的扩容存储域中的不同子存储域属于不同物理故障域,且针对不同新存储业务所选择的子存储域均不同;
将所述每个新存储业务的待存储副本数据,分别存储于该新存储业务对应的每个扩容存储域的存储设备中。
4.根据权利要求3所述的方法,其特征在于,在所述选择所述第二数量个子存储域作为扩容存储域之前,还包括:
将得到的子存储域划分为多组子存储域,且每组子存储域中的不同子存储域属于不同物理故障域;
所述选择所述第二数量个子存储域作为扩容存储域,包括:
从所述多组子存储域中的一组子存储域中,选择所述第二数量个子存储域作为扩容存储域。
5.根据权利要求1-4任一项所述的方法,其特征在于,所述存储设备中包括多个对象存储单元OSD,且所述副本数据均存储于所述存储设备中的OSD中。
6.一种分布式文件系统ceph中数据存储装置,其特征在于,所述装置包括:
拓扑结构获取模块,用于获取存储设备集群的拓扑结构,所述存储设备集群包括多个存储设备,所述拓扑结构表示所述存储设备集群的物理故障域的划分情况;
故障子域划分模块,用于将所述存储设备集群的每个物理故障域均划分为多个虚拟故障子域;
故障子域选择模块,用于针对每个存储业务的待存储副本数据,基于需要存储的副本数据的第一数量,选择所述第一数量个虚拟故障子域作为存储故障域,所选择的存储故障域中的不同虚拟故障子域属于不同物理故障域,且针对不同存储业务所选择的虚拟故障子域均不同;
第一存储模块,用于将所述每个存储业务的待存储副本数据,分别存储于该存储业务对应的每个存储故障域的存储设备中。
7.根据权利要求6所述的装置,其特征在于,所述装置还包括:
第一分组模块,用于将得到的虚拟故障子域划分为多组虚拟故障子域,且每组虚拟故障子域中的不同虚拟故障子域属于不同物理故障域;
所述故障子域选择模块,具体用于:
从所述多组虚拟故障子域中的一组虚拟故障子域中,选择所述第一数量个虚拟故障子域作为存储故障域。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京奇艺世纪科技有限公司,未经北京奇艺世纪科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201810499960.5/1.html,转载请声明来源钻瓜专利网。
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置