[发明专利]一种分布式存储系统的数据备份方法和系统在审
申请号: | 201810653278.7 | 申请日: | 2018-06-22 |
公开(公告)号: | CN110633168A | 公开(公告)日: | 2019-12-31 |
发明(设计)人: | 张海杰;刘洋;黄敦荣;贺磊 | 申请(专利权)人: | 北京东土科技股份有限公司 |
主分类号: | G06F11/14 | 分类号: | G06F11/14 |
代理公司: | 11332 北京品源专利代理有限公司 | 代理人: | 孟金喆 |
地址: | 100041 北京市石*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 待备份数据块 元数据信息 分布式存储系统 数据备份 数据块 备份 备份数据块 元数据管理 备份请求 节点备份 节点发送 空闲状态 拓扑结构 窄带宽 集群 存储 检测 网络 | ||
本发明实施例公开了一种分布式存储系统的数据备份方法和系统。方法包括:所述元数据管理集群在检测到所述分布式存储系统的拓扑结构发生变化或者数据块发生变化时,对发生变化的节点的元数据信息或者变化的数据块对应的元数据信息进行备份;当存储有待备份数据块的第一节点与所述分布式存储系统中其它节点之间的网络处于空闲状态时,确定备份所述待备份数据块的第二节点;向所述第二节点发送包括所述待备份数据块的元数据信息的备份请求,以供所述第二节点根据所述待备份数据块的元数据信息从所述第一节点备份所述待备份数据块。本实施例能够实现窄带宽条件下的数据备份。
技术领域
本发明实施例涉及数据存储技术,尤其涉及一种分布式存储系统的数据备份方法和系统。
背景技术
现有的数据存储多采用分布式存储系统存储数据,而分布式存储系统采用实时、多副本的备份策略,以保证源文件和副本文件在任意时刻具有强一致性。也正是因为分布式存储系统的实时、多副本的备份策略,对网络带宽和传输速率要求较高。
在一些特殊场景中,网络带宽小于4M,称为窄带。窄带网络中数据传输速率较低,数据传输量较小。上述分布式存储系统在窄带宽条件下难以实施实时、多副本的备份策略,容易导致数据备份失败。
发明内容
本发明实施例提供一种分布式存储系统的数据备份方法、元数据管理集群、系统和存储介质,以实现窄带宽条件下的数据备份。
第一方面,本发明实施例提供了一种分布式存储系统的数据备份方法,适用于分布式存储系统,所述分布式存储系统包括:至少两个节点和元数据管理集群;所述方法包括:
所述元数据管理集群在检测到所述分布式存储系统的拓扑结构发生变化或者数据块发生变化时,对发生变化的节点的元数据信息或者变化的数据块对应的元数据信息进行备份;
当存储有待备份数据块的第一节点与所述分布式存储系统中其它节点之间的网络处于空闲状态时,确定备份所述待备份数据块的第二节点;
向所述第二节点发送包括所述待备份数据块的元数据信息的备份请求,以供所述第二节点根据所述待备份数据块的元数据信息从所述第一节点备份所述待备份数据块。
第二方面,本发明实施例还提供了一种元数据管理集群,所述元数据管理集群包括在分布式存储系统中,所述分布式存储系统还包括至少两个节点;
所述元数据管理集群包括:
元数据信息备份模块,用于在检测到所述分布式存储系统的拓扑结构发生变化或者数据块发生变化时,对发生变化的节点的元数据信息或者变化的数据块对应的元数据信息进行备份;
确定模块,用于当存储有待备份数据块的第一节点与所述分布式存储系统中其它节点之间的网络处于空闲状态时,确定备份所述待备份数据块的第二节点;
发送模块,用于向所述第二节点发送包括所述待备份数据块的元数据信息的备份请求,以供所述第二节点根据所述待备份数据块的元数据信息从所述第一节点备份所述待备份数据块。
第三方面,本发明实施例还提供了一种分布式存储系统,包括:至少两个节点和元数据管理集群;
所述元数据管理集群,用于在检测到所述分布式存储系统的拓扑结构发生变化或者数据块发生变化时,对发生变化的节点的元数据信息或者变化的数据块对应的元数据信息进行备份;当存储有待备份数据块的第一节点与所述分布式存储系统中其它节点之间的网络处于空闲状态时,确定备份所述待备份数据块的第二节点;向所述第二节点发送包括所述待备份数据块的元数据信息的备份请求,以供所述第二节点根据所述待备份数据块的元数据信息从所述第一节点备份所述待备份数据块。
所述第一节点,用于向第二节点备份所述待备份数据块;
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京东土科技股份有限公司,未经北京东土科技股份有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201810653278.7/2.html,转载请声明来源钻瓜专利网。
- 上一篇:一种数字资产灾害恢复方法
- 下一篇:备份式计算机存储系统