[发明专利]数据存储方法、设备及计算机可读存储介质有效
申请号: | 201811238872.6 | 申请日: | 2018-10-23 |
公开(公告)号: | CN109343801B | 公开(公告)日: | 2021-11-09 |
发明(设计)人: | 杨耿丹;饶俊明 | 申请(专利权)人: | 深圳前海微众银行股份有限公司 |
主分类号: | G06F3/06 | 分类号: | G06F3/06 |
代理公司: | 深圳市世纪恒程知识产权代理事务所 44287 | 代理人: | 胡海国;魏兰 |
地址: | 518052 广东省深圳市前海深港合作区前*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 数据 存储 方法 设备 计算机 可读 介质 | ||
1.一种数据存储方法,其特征在于,所述数据存储方法包括:
在接收到客户端发起的数据存储请求时,确定所述客户端的操作系统类型,并按预设规则在预先构建的各分布式存储Ceph集群中筛选得到推荐Ceph集群;
根据所述操作系统类型得到对应的存储驱动类型,并根据所述存储驱动类型确定对应的数据存储策略;
依据所述数据存储策略和所述推荐Ceph集群执行数据存储操作;
其中,所述数据存储方法还包括:
获取各Ceph集群中各磁盘的磁盘空间使用率,及各Ceph集群中的监控服务器的监控数据;
根据所述各Ceph集群中各磁盘的磁盘空间使用率、所述监控数据检测是否存在满足预设条件的Ceph集群,其中,所述预设条件包括:Ceph集群中各所述磁盘空间使用率中的最大值超过预设配置阈值,各所述磁盘空间使用率中的最大值与最小值之间的差值超过预设差值,和/或者,所述监控数据中的当前集群的misplaced_objects状态不为0;
若存在,则调整满足所述预设条件的Ceph集群中对应磁盘的权重,以使得所述Ceph集群根据调整后的磁盘的权重确定存储数据的磁盘分布。
2.如权利要求1所述的数据存储方法,其特征在于,当所述存储驱动类型为分布式存储文件系统Cephfs存储驱动时,所述依据所述数据存储策略和所述推荐Ceph集群执行数据存储操作的步骤,包括:
对所述推荐Ceph集群进行划卷并配置容量,得到卷的信息,并随机生成用户名和密钥文件;
将所述卷的信息、所述用户名和所述密钥文件发送至所述客户端,以使得所述客户端基于所述用户名和密钥文件登录后,将数据挂载至与所述卷的信息对应的文件目录中。
3.如权利要求1所述的数据存储方法,其特征在于,当所述存储驱动类型为网络文件系统nfs存储驱动时,所述依据所述数据存储策略和所述推荐Ceph集群执行数据存储操作的步骤,还包括:
对所述推荐Ceph集群进行划卷并配置容量,得到卷的信息,将所述卷的信息通过预设的ganesha集群转换成nfs协议格式的卷的信息;
将转换后的卷的信息发送至所述客户端,以使得所述客户端将数据挂载至与所述转换后的卷的信息对应的文件目录中。
4.如权利要求1所述的数据存储方法,其特征在于,所述按预设规则在预先构建的各分布式存储Ceph集群中筛选得到推荐Ceph集群的步骤包括:
根据所述数据存储请求确定待存储数据量;
获取预先构建的各Ceph集群的剩余容量,筛选出所述剩余容量大于所述待存储数据量的Ceph集群,记为待选Ceph集群;
获取各待选Ceph集群的服务器参数,根据所述服务器参数得到各待选Ceph集群的得分,并将所述得分中最大值对应的待选Ceph集群确定为推荐Ceph集群。
5.如权利要求4所述的数据存储方法,其特征在于,所述获取各待选Ceph集群的服务器参数,根据所述服务器参数得到各待选Ceph集群的得分的步骤,包括:
获取各待选Ceph集群的服务器参数,所述服务器参数包括对象存储设备服务器的集群空间使用率和磁盘繁忙率、元数据服务器的CPU使用率及监控服务器的CPU使用率;
根据所述对象存储设备服务器的集群空间使用率和磁盘繁忙率、元数据服务器的CPU使用率及监控服务器的CPU使用率及各自对应的预设权重系数计算加权和,并将所述加权和作为所述待选Ceph集群的得分。
6.如权利要求1-5中任一项所述的数据存储方法,其特征在于,所述数据存储方法还包括:
每隔预设周期获取各Ceph集群的已使用空间和原始存储空间,根据所述已使用空间和原始存储空间计算对应的总空间使用率;
判断所述总空间使用率是否超过预设阈值;
若是,则生成对应的提示信息,并发送至对应的管理端,以提示管理人员进行扩容处理。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于深圳前海微众银行股份有限公司,未经深圳前海微众银行股份有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201811238872.6/1.html,转载请声明来源钻瓜专利网。
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置