[发明专利]一种基于Pyramid码的局部性修复编码方法有效
申请号: | 201710071734.2 | 申请日: | 2017-02-09 |
公开(公告)号: | CN106776112B | 公开(公告)日: | 2019-08-02 |
发明(设计)人: | 王静;张崇;杨洋 | 申请(专利权)人: | 长安大学 |
主分类号: | G06F11/10 | 分类号: | G06F11/10;H04L29/08 |
代理公司: | 西安恒泰知识产权代理事务所 61216 | 代理人: | 李婷 |
地址: | 710064 陕西省*** | 国省代码: | 陕西;61 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 基于 pyramid 局部性 修复 编码 方法 | ||
1.一种基于Pyramid码的局部性修复编码方法,在分布式存储系统中,所需存储的文件系统中的每个文件,在存储时被切分成若干个数据块,每个数据块都被存储在分布式存储系统的不同的存储节点上,本方法是对包含n个存储节点的分布式存储系统进行局部性修复编码,其中n为≥8的自然数;
其特征在于,包括以下步骤:
若n/8=t为整数,文件系统被切分为4t个数据块并存储在t个局部修复组内的存储节点上,每个局部修复组中存储4个数据块和4个校验块,
其中,每个所述局部修复组视为一个最小编码结构C,所述最小编码结构C由n个存储节点中任意每8个存储节点构成,所述校验块为数据块经过生成矩阵G线性编码生成,G表示生成C所需的生成矩阵,
其中g12、g13、g21、g24、g31、g34、g42和g43为Pyramid码的编码系数,各列之间编码系数线性独立,
所述最小编码结构C=D·G,D=[d11,d12,...,dij,...,dtj],dij为第i个局部修复组存储的j个数据块,i表示第i个局部修复组,i≤t,j表示局部修复组内存储的数据块数目,1≤j≤4且为整数;
若n/8为非整数,文件系统被切分为4t+ε个数据块,其中前t-1个局部修复组中每个局部修复组存储4个数据块,第t个局部修复组存储4+ε个数据块,其中,ε为n/8的余数个存储节点中包含的数据块个数,ε≤4且为整数,对第t个局部修复组采用MDS编码方式进行编码后存储文件系统。
2.一种分布式存储系统中存储节点故障修复方法,其特征在于,包括以下步骤:
步骤一、采用权利要求1所述的方法对包含有n个存储节点的分布式存储系统进行局部性修复编码;
步骤二,若第i个局部修复组内出现存储节点故障,未出现故障的存储节点为存活存储节点,第i个局部修复组内存储4个数据块di1、di2、di3和di4以及4个校验块ci1、ci2、ci3和ci4,其中di1、di2、di3和di4是按照两行两列依次排列的数据块,ci1为di1和di2经过生成矩阵G线性编码生成,ci2为di3和di4经过生成矩阵G线性编码生成,ci3为di1和di3经过生成矩阵G线性编码生成,ci4为di2和di4经过生成矩阵G线性编码生成;
(1)若第i个局部修复组内出现一个存储节点故障:
若出现故障的存储节点存储的是di1、di2、di3和di4中的任意一个,则通过出现故障的存储节点同行或者同列的存活存储节点进行修复;
若出现故障的存储节点存储的是ci1、ci2、ci3和ci4中的任意一个,则通过生成故障的存储节点存储的校验块时对应的存活存储节点进行修复;
(2)若第i个局部修复组内出现两个存储节点故障:
若出现故障的存储节点存储的是di1、di2、di3和di4中的两个或ci1、ci2、ci3和ci4中的两个:若所述di1、di2、di3和di4中的两个或ci1、ci2、ci3和ci4中的两个同行或同列,则分别通过所述di1、di2、di3和di4中的两个或ci1、ci2、ci3和ci4中的两个所在列或行的存活存储节点进行修复;若所述di1、di2、di3和di4中的两个或ci1、ci2、ci3和ci4中的两个非同行或同列,则通过所述di1、di2、di3和di4中的两个数据块中的一个数据块所在列和另一数据块所在行的三个存活存储节点进行修复;
若出现故障的存储节点存储的是di1、di2、di3和di4中的一个及ci1、ci2、ci3和ci4中的一个,则通过这个数据块所在列和这个校验块所在行的三个存活存储节点进行修复,或者通过这个数据块所在行和这个校验块所在列的三个存活存储节点进行修复。
3.权利要求2所述方法,其特征在于,步骤(2)所述若局部修复组内出现两个存储节点故障时,采用步骤(1)所述同时进行两个存储节点故障修复。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于长安大学,未经长安大学许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201710071734.2/1.html,转载请声明来源钻瓜专利网。
- 上一篇:一种基于LRC纠删码的可恢复云存储系统
- 下一篇:一种虚拟机备份方法及装置