[发明专利]数据资源复制方法以及装置

说明书

技术领域

本发明涉及通信技术领域，尤其涉及数据资源复制方法以及装置。

背景技术

由于Openstack Object Storage(Swift)具有强大的扩展性、冗余性和持久性，目前多基于Swift来完成使用普通硬件构建冗余的、可扩展的分布式云存储集群架构。

如图1所示，基于swift的云存储集群架构中包括管理节点(Manager)、接入节点(Proxy)以及存储节点(Storage)。由于Swift是采用多份(>＝3)复制机制来提高数据资源的可靠性的技术，因此在访问swift云存储时，客户端将具有数据资源的写入请求发送到管理节点后，由管理节点将该写入请求分发到接入节点上，接入节点将该数据资源按照指定的副本数量写入多个存储节点上，来完成数据资源的存储。

现有技术中，在数据资源写入存储节点的过程中，如果对应的存储节点关机，接入节点会自动寻找handoff(后备)资源，即备份节点，来保证写入的数据资源按指定的副本数量写入，并向客户端返回写入成功。

但是，在云存储集群系统的维护操作中通常需要重启或关机存储节点，例如升级存储节点软件或更换存储节点硬件时。这种情况的存储节点可以很快正常开机。因此，在数据资源写入存储节点时若检测到存储节点关机，且关机的存储节点正是因为上述原因造成的正常关机，那么该关机的存储节点将很快恢复正常。此时，若将数据资源写入备份节点后，根据swift机制的标准还要将写入备份节点上的数据资源转移到恢复正常的存储节点，这样一来，在具有大规模的存储节点组建的swift云存储集群架构中，若大量的进行数据资源复制、转移，则会大幅降低swift云存储集群架构的可用性以及可靠性。

发明内容

针对现有技术的缺陷，本发明提供了数据资源复制方法以及装置。

本发明提供一种数据资源复制方法，应用于基于Openstack Object Storage(swift)的云存储集群的Proxy接入节点，所述存储集群还包括Manager管理节点、Storage存储节点，其中，该方法包括：

在分别向多个存储节点发送具有数据资源的写入请求后，若判断多个存储节点中的任意存储节点进行数据资源写入失败，将数据资源写入失败的存储节点作为故障节点；

向管理节点发送查询消息，以查询所述故障节点的关机状态；

在接收到管理节点回复的应答消息后，根据管理节点回复的应答消息确定所述故障节点的关机状态为正常关机状态还是非正常关机状态，当确定所述关机状态为正常关机状态时，则不向备份节点发送所述写入请求，当确定所述关机状态为非正常关机状态时，将所述具有数据资源的写入请求发送至备份节点。

本发明还提供一种数据资源复制方法，应用于基于Openstack Object Storage(swift)的云存储集群的Manager管理节点，所述存储集群还包括Proxy接入节点、Storage存储节点，所述方法包括：

接收存储节点发送的关机消息，将所述存储节点的关机消息保存至全局关机信息中；

在接收到查询存储节点关机状态的查询消息后，获取所述查询消息中携带的存储节点的节点标识；

检查所述全局关机信息中是否有与所述存储节点的节点标识对应的存储节点的关机消息，并得到查询结果；

根据所述查询结果回复应答消息，以使发送所述查询消息的节点根据所述查询结果判断所述存储节点的关机状态。

本发明还提供一种数据资源复制方法，应用于基于Openstack Object Storage(swift)的云存储集群的Storage存储节点，所述存储集群还包括Proxy接入节点、Manager管理节点，所述方法包括：

定期向存储有自身保存的数据资源的副本的其他存储节点发送审核消息，以检查本地存储的数据资源与保存至其他存储节点的副本内容是否一致；

若在预设超时时间未接收到所述其他存储节点中任意存储节点回复的回应消息，将未回复回应消息的存储节点作为故障节点，并向管理节点发送查询消息，以查询所述故障节点的关机状态；

接收管理节点回复的应答消息，若根据所述应答消息确定所述故障节点为非正常关机状态，将所述本地存储的数据资源中与所述故障节点对应的数据资源写入备份节点，若根据所述应答消息确定所述故障节点为正常关机状态，则不会将所述本地存储的数据资源中与所述故障节点对应的数据资源写入备份节点。