[发明专利]校验块的生成方法及装置在审
申请号: | 202111176152.3 | 申请日: | 2021-10-09 |
公开(公告)号: | CN114048061A | 公开(公告)日: | 2022-02-15 |
发明(设计)人: | 魏舒展;顾隽清;赵亚飞;董元元 | 申请(专利权)人: | 阿里云计算有限公司;阿里巴巴(中国)有限公司 |
主分类号: | G06F11/10 | 分类号: | G06F11/10;G06F11/14 |
代理公司: | 北京博思佳知识产权代理有限公司 11415 | 代理人: | 王剑 |
地址: | 310024 浙江省*** | 国省代码: | 浙江;33 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 校验 生成 方法 装置 | ||
本说明书一个或多个实施例提供一种校验块的生成方法及装置。所述方法包括:针对待生成校验块的多个原始数据块,确定所述多个原始数据块的全局编码矩阵;针对划分所述多个原始数据块得到的各个局部域,基于所述全局编码矩阵确定所述局部域的局部编码矩阵,各个局部域内包括归属于所述局部域的原始数据块;基于所述全局编码矩阵生成所述多个原始数据块的全局校验块,并基于各个局部域的局部编码矩阵生成各个局部域的局部校验块,以使所述全局校验块与所述各个局部域的局部校验块之间具备推导关系。
技术领域
本说明书一个或多个实施例涉及数据存储技术领域,尤其涉及一种校验块的生成方法及装置。
背景技术
随着技术发展和需求提升,数据存储的规模日益扩大,现行的数据存储方案大多结合具有高可扩展性的分布式系统加以实现。在所述分布式系统中,数据以数据块的形式进行存储,一个文件将被分解为多个数据块(Block)分别存储在不同的磁盘或存储节点上。
为了保障数据的可恢复性,分布式系统中一般会为原始数据块设置校验块(Parity Block),所述校验块可以分为全局校验块(Global Parity Block)和局部校验块(Local Reconstruction Parity Block)。在原始数据块部分丢失的情况下,基于未丢失的原始数据块和校验块能够对丢失的原始数据块进行恢复,而在校验块丢失的情况下,基于原始数据块也能够再现丢失的校验块。相关技术中,为恢复丢失的校验块,在获取原始数据块时耗费了大量的流量和时间,降低了数据恢复的效率。
发明内容
有鉴于此,本说明书一个或多个实施例提供一种校验块的生成方法及装置。
为实现上述目的,本说明书一个或多个实施例提供如下技术方案:
根据本说明书一个或多个实施例的第一方面,提出了一种校验块的生成方法,所述方法包括:
针对待生成校验块的多个原始数据块,确定所述多个原始数据块的全局编码矩阵;
针对划分所述多个原始数据块得到的各个局部域,基于所述全局编码矩阵确定所述局部域的局部编码矩阵;各个局部域内包括归属于所述局部域的原始数据块;
基于所述全局编码矩阵生成所述多个原始数据块的全局校验块,并基于各个局部域的局部编码矩阵生成各个局部域的局部校验块,以使所述全局校验块与所述各个局部域的局部校验块之间具备推导关系。
根据本说明书一个或多个实施例的第二方面,提出了一种校验块的生成装置,所述装置包括全局矩阵确定单元、局部矩阵确定单元和校验块生成单元:
所述全局矩阵确定单元,针对待生成校验块的多个原始数据块,确定所述多个原始数据块的全局编码矩阵;
所述局部矩阵确定单元,针对划分所述多个原始数据块得到的各个局部域,基于所述全局编码矩阵确定所述局部域的局部编码矩阵;各个局部域内包括归属于所述局部域的原始数据块;
所述校验块生成单元,基于所述全局编码矩阵生成所述多个原始数据块的全局校验块,并基于各个局部域的局部编码矩阵生成各个局部域的局部校验块,以使所述全局校验块与所述各个局部域的局部校验块之间具备推导关系。
根据本说明书一个或多个实施例的第三方面,提出了一种电子设备,包括处理器和用于存储处理器可执行指令的存储器;
其中,所述处理器通过运行所述可执行指令实现如上述第一方面所述方法中的步骤。
根据本说明书一个或多个实施例的第四方面,提出一种计算机可读存储介质,其上存储有计算机程序,所述计算机程序被处理器执行时实现如上述第一方面所述方法中的步骤。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于阿里云计算有限公司;阿里巴巴(中国)有限公司,未经阿里云计算有限公司;阿里巴巴(中国)有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202111176152.3/2.html,转载请声明来源钻瓜专利网。
- 上一篇:小管径螺旋管无缆检测方法和装置
- 下一篇:汽车代驾方法、装置及存储介质