[发明专利]数据恢复方法、装置、电子设备及计算机可读存储介质在审
申请号: | 202010471706.1 | 申请日: | 2020-05-28 |
公开(公告)号: | CN111625402A | 公开(公告)日: | 2020-09-04 |
发明(设计)人: | 甘红星 | 申请(专利权)人: | 北京金山云网络技术有限公司 |
主分类号: | G06F11/14 | 分类号: | G06F11/14;G06F11/10 |
代理公司: | 北京超凡宏宇专利代理事务所(特殊普通合伙) 11463 | 代理人: | 徐彦圣 |
地址: | 100000 北京*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 数据 恢复 方法 装置 电子设备 计算机 可读 存储 介质 | ||
本申请提供了一种数据恢复方法、装置、电子设备及计算机可读存储介质,涉及数据处理技术领域,该方法当检测到数据缺失了一个或多个副本时,选择所缺失的一个或多个副本作为待恢复副本;然后生成恢复任务命令,恢复任务命令包括每个待恢复副本的ID,以及每个待恢复副本的目的节点设备的信息。再将所述恢复任务命令发送至目标存储设备,使所述目标存储设备根据所述恢复任务命令恢复每个所述待恢复副本,并根据每个所述待恢复副本的目的节点设备的信息,将每个恢复后的待恢复副本写入与其对应的目的节点设备。该方法减少了不必要的资源浪费,数据恢复的时间也更短,提升了数据安全性。
技术领域
本申请涉及数据处理技术领域,尤其是涉及一种数据恢复方法、装置、电子设备及计算机可读存储介质。
背景技术
在分布式存储系统中,最常见的两种数据冗余技术是多副本策略和纠删码(Erasure Code,简称EC)。相比于多副本策略,纠删码具有冗余度更低、磁盘利用率更高等优势。纠删码技术主要通过相关纠删码算法将原始的数据块进行编码得到校验块,并将数据块和校验块一并存储起来,以达到容错的目的。
目前的分布式存储系统中,当副本出现缺失时,会触发副本的恢复机制。管理节点会在副本数量没有达到阈值数量时,逐一恢复丢失的副本。对于多副本而言,如果丢失一个副本,就会触发一次恢复;丢失两个副本,就会依次触发两次恢复;丢失了多个副本,就会依次触发多次恢复。
可见,在现有EC副本的恢复过程中,当恢复多个副本时,需要触发多次恢复任务,对于处理器和网络带宽都是一种浪费,而且多次恢复需要花费更长的时间,降低了数据安全性。
发明内容
本发明的目的在于提供一种数据恢复方法、装置、电子设备及计算机可读存储介质,以解决目前的分布式存储系统的在多个EC副本恢复过程中存在的效率较低的技术问题。
第一方面,本发明实施例提供了一种数据恢复方法,应用于分布式对象存储系统中的管理设备,方法包括:
当检测到数据缺失了一个或多个副本时,选择所缺失的一个或多个副本作为待恢复副本;
生成恢复任务命令,所述恢复任务命令包括每个所述待恢复副本的ID,以及每个所述待恢复副本的目的节点设备的信息;
将所述恢复任务命令发送至目标存储设备,使所述目标存储设备根据所述恢复任务命令恢复每个所述待恢复副本,并根据每个所述待恢复副本的目的节点设备的信息,将每个恢复后的待恢复副本写入与其对应的目的节点设备。
在一些实施方式中,所述目标存储设备为所述目的节点设备其中之一,
所述将恢复任务命令发送至目标存储设备,使所述目标存储设备根据所述恢复任务命令恢复每个所述待恢复副本,包括:
当检测到数据缺失了多个副本时,将所述恢复任务命令发送至任意一个目的节点设备,使所述任意一个目的节点设备恢复多个所述待恢复副本,且根据每个所述待恢复副本的目的节点设备的信息,将恢复后的所述待恢复副本写入与其对应的目的节点设备。
在一些实施方式中,所述目标存储设备包括存储单元,
所述将所述恢复任务命令发送至目标存储设备,使所述目标存储设备根据所述恢复任务命令恢复每个所述待恢复副本,包括:
将所述恢复任务命令发送至任意一个所述目标存储设备的存储单元,以在所述目标存储设备的存储单元恢复每个所述待恢复副本,且根据每个所述待恢复副本的目的节点设备的信息,将恢复后的所述待恢复副本写入与其对应的目的节点设备。
在一些实施方式中,在所述将所述恢复任务命令发送至目标存储设备,使所述目标存储设备根据所述恢复任务命令恢复每个所述待恢复副本的步骤之后,还包括:
接收来自所述目标存储设备的完成恢复消息,并更新每个所述待恢复副本的状态信息。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京金山云网络技术有限公司,未经北京金山云网络技术有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202010471706.1/2.html,转载请声明来源钻瓜专利网。
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置