[发明专利]副本的存放处理方法、装置及计算机存储介质

说明书

本发明实施例公开了一种副本的存放处理方法，所述方法包括：接收来自客户端的创建副本的存储请求；基于所述创建副本的存储请求，获取分布式文件系统中数据节点的负载率；根据所述负载率的排序，确定所述副本所要存放的数据节点的节点信息；根据所述节点信息，将所述副本存储到对应的数据节点。本发明实施例还公开了一种副本的存放处理装置及计算机存储介质。

技术领域

本发明涉及通信技术领域，尤其涉及一种副本的存放处理方法、装置及计算机存储介质。

背景技术

分布式文件系统数据的副本技术是分布式计算的一个重要组成部分，这一技术允许数据在多个服务器端共享，一个本地服务器可以存取不同物理地点的远程服务器上的数据，也可以使所有服务器均持有数据的副本，以提高系统的可靠性。然而，现有技术中分布式文件系统副本的放置策略通常是以随机选择策略为主，而采用随机选择策略的存放方式具有随机性，后期的负载均衡任务重，或不同副本的访问热度差异较大。

发明内容

本发明实施例提供了一种副本的存放处理方法、装置及计算机存储介质。

本发明实施例的技术方案是这样实现的：

本发明实施例提供了一种副本的存放处理方法，所述方法包括：

接收来自客户端的创建副本的存储请求；

基于所述创建副本的存储请求，获取分布式文件系统中数据节点的负载率；

根据所述负载率的排序，确定所述副本所要存放的数据节点的节点信息；

根据所述节点信息，将所述副本存储到对应的数据节点。

其中，所述获取分布式文件系统中数据节点的负载率之前，所述方法还包括：

统计所述分布式文件系统中数据节点的访问率；

根据所述数据节点的访问率，确定所述数据节点的访问率满足第一条件的数据节点为待确定负载率的数据节点；

获取所述待确定负载率的数据节点的负载率。

其中，所述统计所述分布式文件系统中数据节点的访问率，包括：

统计所述分布式文件系统中目录的访问率；

根据所述目录的访问率，确定所述目录对应的数据节点的访问率。

其中，所述统计分布式文件系统中数据节点的访问率，包括：

统计分布式文件系统中数据节点在预定周期内的访问次数。

所述根据所述数据节点的访问率，确定所述数据节点的访问率满足第一条件的数据节点为待确定负载率的数据节点，包括：

基于所述创建副本的存储请求，确定所述副本的属性；

根据所述副本的属性，确定所述副本的预访问率；

根据所述副本的预访问率及所述分布式文件系统中数据节点的访问率，选择所述分布式文件系统中数据节点的访问率小于或等于所述预访问率的N个数据节点作为待确定负载率的数据节点；

获取所述N个数据节点的负载率；其中，N为大于等于零的正整数。

其中，所述副本的属性包括所述副本的预存放目录；

所述基于所述副本的属性，确定所述副本的预访问率，包括：

基于所述副本的属性，确定所述副本的预存放目录；

根据所述副本的预存放目录，确定所述预存放目录对应的数据节点的访问率，作为所述副本的预访问率。

其中，所述副本的属性还包括所述副本的类别；