[发明专利]一种日志恢复方法、存储装置和存储节点有效

专利信息
申请号: 201611089594.3 申请日: 2016-11-30
公开(公告)号: CN106776130B 公开(公告)日: 2020-07-28
发明(设计)人: 李开广;王英 申请(专利权)人: 华为技术有限公司
主分类号: G06F11/14 分类号: G06F11/14
代理公司: 广州三环专利商标代理有限公司 44202 代理人: 熊永强;李稷芳
地址: 518129 广东*** 国省代码: 广东;44
权利要求书: 查看更多 说明书: 查看更多
摘要:
搜索关键词: 一种 日志 恢复 方法 存储 装置 节点
【说明书】:

揭露一种日志恢复技术,可应用于分布式存储系统,日志恢复方法包括:在目标存储节点从故障恢复正常后,向所述分布式存储系统中的所述正常存储节点发送获取恢复日志的请求;所述目标存储节点接收其他存储节点返回的第一恢复日志记录,所述第一恢复日志指示了需要恢复的业务日志;按照所述第一恢复日志的指示,所述目标存储节点向所述正常存储节点发送获取业务日志的请求;所述目标存储节点根据收到的业务日志,生成目标业务日志;对所述目标业务日志进行保存。

技术领域

发明涉发明存储技术,涉及于存储领域技术的日志领域。

背景技术

在存储领域,越来越多的分布式存储采用基于对象的架构,该架构分为上下两层,其中上层为文件系统,块,S3/Swift等服务层,下层为分布式键值(key value,KV)存储层。

分布式KV存储层负责系统存储空间的分配,保存和释放,为上层服务层提供跨存储节点的可靠性,同时需要支持磁盘等存储介质故障的自我修复功能。分布式KV可以通过伴生日志来实现自我修复功能,修复类的伴生日志也称为恢复日志。

服务层除了提供文件系统,块,S3/Swift等基本服务外,还需要提供配额,远程复制等增值特性,而这些增值特性也需要保存配额的消费记录,远程复制的增量变化记录等。于是,这些增值特性对分布式存储提出了额外的需求。分布式存储也可以通过伴生日志提供了这些额外记录的存储和读取方法,业务特性附加类伴生日志也称为业务日志。

现有技术中,一种分布式存储系统的校验方法是:把业务数据拆分成数据分片,由数据分片计算出冗余分片;一部分存储节点存储业务数据分片,另外一部分存储节点存储冗余分片。例如:数据存储节点的数量为N,每个数据存储节点存储一个数据分片;冗余存储节点的数量为M,每个冗余存储节点存储一个校验分片。

对业务数据而言,如果分布式存储系统中存在故障存储节点,在故障存储节点的数量不超过M个的情况下,仅对余下存储节点正常写入数据(数据分片或者校验分片)并不会造成数据丢失,因此写入操作会被正常执行。业务日志伴随着分片进行存储,每个存储节点保存的业务日志相同。当故障存储节点恢复正常后,通过其他存储节点的分片,可以恢复出未写入的分片。然而,现有技术中,业务日志并没有伴随分片一起得到恢复,因此所述恢复正常的存储节点中虽然有分片,却没有业务日志。

在这种情况下,由于原本正常存储节点,在接收完分片后也可能发生故障。这意味着,每个存储节点的业务日志都不可靠的,因此如果想要从分布式存储系统中读取业务日志,主机必须从M+1个存储节点中获得业务日志,对获得的业务日志进行合并归纳后才能获得可靠的业务日志。获取M+1个业务日志的并进行归纳整理的过程,加重了主机的运算资源消耗和时间等待。

发明内容

提供一种日志,可以解决现有技术中,业务日志恢复速度慢的问题。

第一方面,本发明提供了一种日志恢复方法的实施例,应用于目标存储节点,所述目标存储节点发生故障,所述目标存储节点位于分布式存储系统中,所述分布式存储系统包括所述目标存储节点和正常存储节点,该方法包括:所述目标存储节点从故障状态恢复到正常状态后,向所述分布式存储系统中的所述正常存储节点发送获取恢复日志的请求;所述目标存储节点接收其他存储节点返回的所述恢复日志,所述恢复日志包括第一恢复日志记录,所述第一恢复日志指示了需要恢复的业务日志;按照所述第一恢复日志的指示,所述目标存储节点向所述正常存储节点发送获取业务日志的请求;所述目标存储节点根据收到的业务日志,生成目标业务日志;对所述目标业务日志进行保存。应用该方案,主机可以随时获取业务日志,并且只需要从一个存储节点获取业务日志即可。过程简单、延时低。

第一方面的第一种可能实现方式,在主机检测到所述目标存储节点发生故障后,所述主机向正常存储节点发送第一恢复日志,所述正常存储节点接收主机发送的所述第一恢复日志并存储。该方案为后续利用第一恢复日志来恢复业务日志提供了基础。

下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。

该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于华为技术有限公司,未经华为技术有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服

本文链接:http://www.vipzhuanli.com/pat/books/201611089594.3/2.html,转载请声明来源钻瓜专利网。

×

专利文献下载

说明:

1、专利原文基于中国国家知识产权局专利说明书;

2、支持发明专利 、实用新型专利、外观设计专利(升级中);

3、专利数据每周两次同步更新,支持Adobe PDF格式;

4、内容包括专利技术的结构示意图流程工艺图技术构造图

5、已全新升级为极速版,下载速度显著提升!欢迎使用!

请您登陆后,进行下载,点击【登陆】 【注册】

关于我们 寻求报道 投稿须知 广告合作 版权声明 网站地图 友情链接 企业标识 联系我们

钻瓜专利网在线咨询

周一至周五 9:00-18:00

咨询在线客服咨询在线客服
tel code back_top