[发明专利]副本的存放处理方法、装置及计算机存储介质在审
申请号: | 201811281064.8 | 申请日: | 2018-10-30 |
公开(公告)号: | CN109522289A | 公开(公告)日: | 2019-03-26 |
发明(设计)人: | 桂祖宏;董炳;李琳;胡苏;胥杰 | 申请(专利权)人: | 咪咕文化科技有限公司 |
主分类号: | G06F16/182 | 分类号: | G06F16/182;G06F16/13 |
代理公司: | 北京派特恩知识产权代理有限公司 11270 | 代理人: | 姚文娴;张颖玲 |
地址: | 100032 北京市西城区德*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 副本 数据节点 计算机存储介质 存储请求 节点信息 负载率 分布式文件系统 处理装置 副本存储 创建 排序 客户 | ||
1.一种副本的存放处理方法,其特征在于,所述方法包括:
接收来自客户端的创建副本的存储请求;
基于所述创建副本的存储请求,获取分布式文件系统中数据节点的负载率;
根据所述负载率的排序,确定所述副本所要存放的数据节点的节点信息;
根据所述节点信息,将所述副本存储到对应的数据节点。
2.根据权利要求1所述的方法,其特征在于,所述获取分布式文件系统中数据节点的负载率之前,所述方法还包括:
统计所述分布式文件系统中数据节点的访问率;
根据所述数据节点的访问率,确定所述数据节点的访问率满足第一条件的数据节点为待确定负载率的数据节点;
获取所述待确定负载率的数据节点的负载率。
3.根据权利要求2所述的方法,其特征在于,所述统计所述分布式文件系统中数据节点的访问率,包括:
统计所述分布式文件系统中目录的访问率;
根据所述目录的访问率,确定所述目录对应的数据节点的访问率。
4.根据权利要求2或3所述的方法,其特征在于,所述统计分布式文件系统中数据节点的访问率,包括:
统计分布式文件系统中数据节点在预定周期内的访问次数。
5.根据权利要求2或3所述的方法,其特征在于,所述根据所述数据节点的访问率,确定所述数据节点的访问率满足第一条件的数据节点为待确定负载率的数据节点,包括:
基于所述创建副本的存储请求,确定所述副本的属性;
根据所述副本的属性,确定所述副本的预访问率;
根据所述副本的预访问率及所述分布式文件系统中数据节点的访问率,选择所述分布式文件系统中数据节点的访问率小于或等于所述预访问率的N个数据节点作为待确定负载率的数据节点;
获取所述N个数据节点的负载率;其中,N为大于等于零的正整数。
6.根据权利要求5所述的方法,其特征在于,所述副本的属性包括所述副本的预存放目录;
所述基于所述副本的属性,确定所述副本的预访问率,包括:
基于所述副本的属性,确定所述副本的预存放目录;
根据所述副本的预存放目录,确定所述预存放目录对应的数据节点的访问率,作为所述副本的预访问率。
7.根据权利要求5所述的方法,其特征在于,所述副本的属性还包括所述副本的类别;
所述基于所述副本的属性,确定所述副本的预访问率,包括:
基于所述副本的属性,确定所述副本的类别;
根据所述副本的类别,确定所述类别的数据的访问率,作为所述副本的预访问率。
8.根据权利要求5所述的方法,其特征在于,所述方法还包括:
根据所述获取的所述N个数据节点的访问率的从低到高的排序,选取前M位的数据节点;
获取所述前M位的数据节点的负载率;
根据所述前M位的数据节点的负载率的排序,确定所述副本所要存放的数据节点的节点信息;其中,M为小于等于N的正整数。
9.根据权利要求8所述的方法,其特征在于,所述副本的属性还包括所述副本的副本数R;
所述根据所述前M位的数据节点的负载率的排序,确定所述副本所要存放的数据节点的节点信息,包括:
对所述前M位数据节点的负载率从低到高排序,选取前R位数据节点作为所述副本所要存放的数据节点,确定所述副本所要存放的数据节点的节点信息;其中,R为小于等于M的正整数。
10.根据权利要求1所述的方法,其特征在于,所述统计分布式文件系统中数据节点的负载率,包括:
根据所述数据节点的负载信息,确定所述数据节点的负载率;其中,所述负载信息包括以下至少之一:数据节点的1/O访问率、磁盘空间大小、CPU处理速率、内存使用率。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于咪咕文化科技有限公司,未经咪咕文化科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201811281064.8/1.html,转载请声明来源钻瓜专利网。