[发明专利]数据存储系统及其操作方法有效
申请号: | 201810234156.4 | 申请日: | 2018-03-20 |
公开(公告)号: | CN109144767B | 公开(公告)日: | 2021-12-24 |
发明(设计)人: | R.E.马蒂斯库;C.盖约特;L.帕米斯-华雷斯 | 申请(专利权)人: | 西部数据技术公司 |
主分类号: | G06F11/10 | 分类号: | G06F11/10 |
代理公司: | 北京市柳沈律师事务所 11105 | 代理人: | 邱军 |
地址: | 美国加利*** | 国省代码: | 暂无信息 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 数据 存储系统 及其 操作方法 | ||
公开的技术可以有利地提供有效数据恢复系统,该有效数据恢复系统包括包含第一存储节点和第二存储节点的多个存储节点,以及耦合到存储节点并管理存储节点上的数据的存储的存储逻辑。存储逻辑可运行以:接收包括数据元素的数据集合,该数据集合包括与第一存储节点相关联的数据元素的第一集合和与第二存储节点相关联的数据元素的第二集合;生成数据集合的第一奇偶校验,第一奇偶校验包括包含水平奇偶校验条目的集合的水平奇偶校验;以及组合来自数据集合的数据元素以产生包括跳过者奇偶校验条目的集合的跳过者奇偶校验。组合数据元素包括:使用可逆操作变换来自数据集合的数据元素的子集,水平奇偶校验条目的集合不同于跳过者奇偶校验条目的集合。
技术领域
本公开涉及数据恢复和/或再生。
背景技术
当数据被传输、处理、和/或储存在存储器中,数据可能经常被损坏。奇偶校验位经常被用来验证数据的完整性以保证不会损坏。由于过去若干年中正在被处理和储存的数据量已经急剧地增加,并且只是在加速,特别是在诸如企业存储和云应用的大型存储应用中,所以要求的奇偶校验检查量正在以相应的速率上升。
然而,常规的奇偶校验检查算法经常要求增加地显著的计算和存储要求,并且不能以可接受的速率缩放。当使用先前计算的奇偶校验信息执行丢失的数据重构时,以上问题进一步恶化,因为使用常规的奇偶校验重构技巧,特别是在存储设备故障的事件中,对于准确地重构数据的要求是繁琐的且计算上昂贵的。
作为进一步的示例,对于在过去的十年左右,术语“再生代码”已经有时在编码理论界被用于描述代码构建,该代码构建专注于被要求以修复一个或多个故障(1个故障、2个故障等,取决于容许多少故障)的修复通信量(数据)的量。
例如,总共存在具有每个1太字节(terabyte,TB)的10个用户节点和每个1TB的2个奇偶校验节点的12TB。在前解决方案经常使用传统的Reed Solomon代码用于错误纠正,并且将容许多达2个节点故障。在1个节点故障的情况下,通信量将是10TB(具有用户数据的9个幸存节点和1个奇偶校验节点),因此相对于原始的10个用户节点的大小没有提供通信量节省。在 2次故障的情况下,通信量将是相同的10TB。
发明内容
根据本公开中的主题的一个创新方面,系统包括数据存储系统,该数据存储系统包括包含第一存储节点和第二存储节点的多个存储节点,以及耦合到存储节点并管理存储节点上的数据的存储的存储逻辑。存储逻辑可运行以:接收包括数据元素的数据集合,该数据元素包括与第一存储节点相关联的数据元素的第一集合和与第二存储节点相关联的数据元素的第二集合;生成数据集合的第一奇偶校验,第一奇偶校验包括包含水平奇偶校验条目的集合的水平奇偶校验;以及组合来自数据集合的数据元素以产生包括跳过者奇偶校验条目的集合的跳过者奇偶校验。组合数据元素包括:使用可逆(invertible) 操作变换来自数据集合的数据元素的子集,水平奇偶校验条目的集合不同于跳过者(skipper)奇偶校验条目的集合。
通常,本公开中描述的主题的另一创新方面可以用包括以下各项的方法来实施:接收包括数据元素的数据集合,该数据元素包括与第一存储节点相关联的数据元素的第一集合和与第二存储节点相关联的数据元素的第二集合;生成数据集合的第一奇偶校验,第一奇偶校验包括包含水平奇偶校验条目的集合的水平奇偶校验;以及组合来自数据集合的数据元素以产生包括跳过者奇偶校验条目的集合的跳过者奇偶校验,组合数据元素包括:使用可逆操作变换来自数据集合的数据元素的子集,水平奇偶校验条目的集合不同于跳过者奇偶校验条目的集合。
这些方面中的一个或多个的其它实施方式包括相应的系统、装置、和计算机程序、以及其它方面。这些和其它方面可以被配置为执行编码在计算机存储设备上的方法的动作。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于西部数据技术公司,未经西部数据技术公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201810234156.4/2.html,转载请声明来源钻瓜专利网。
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置