[发明专利]基于纠删码的数据恢复控制方法、装置、设备及介质有效
申请号: | 202110560113.7 | 申请日: | 2021-05-21 |
公开(公告)号: | CN113190384B | 公开(公告)日: | 2022-07-22 |
发明(设计)人: | 杜兴 | 申请(专利权)人: | 重庆紫光华山智安科技有限公司 |
主分类号: | G06F11/14 | 分类号: | G06F11/14 |
代理公司: | 上海光华专利事务所(普通合伙) 31219 | 代理人: | 李铁 |
地址: | 400700 重庆市*** | 国省代码: | 重庆;50 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 基于 纠删码 数据 恢复 控制 方法 装置 设备 介质 | ||
本申请提供一种基于纠删码的数据恢复控制方法、装置、设备及介质,该方法包括:根据预设的纠删比存储数据,所述数据包括源数据和校验数据;当磁盘上线时,加载源数据索引信息,待加载完成后,通过源数据加载标识表示源数据索引加载状态;然后,加载校验数据的索引信息,待加载完成后,通过校验数据加载标识表示校验数据索引加载状态;根据所有源数据加载标识和校验数据加载标识,控制数据上报,并优先获取源数据,待源数据处理完毕后,再对校验数据进行处理,完成数据恢复。通过标识区分源数据与校验数据,采用先加载源数据再加载校验数据的方式,加快了文件系统加载过程和服务节点启动过程,减少了异常状况下服务节点的启动时间,提高了响应效率。
技术领域
本申请涉及数据存储技术领域,特别是涉及一种基于纠删码的数据恢复控制方法、装置、设备及介质。
背景技术
当今互联网高速发展,大数据及云技术的普遍应用,存储系统需要处理的数据越来越多。做为数据存储介质的磁盘,经过几次更新换代,单个磁盘可存储数据量更加庞大。但由于存储环境越来越复杂,常常出现掉电或者故障导致的磁盘重新上线。
目前为了满足使用少量盘存储更多数据且实现灾备,市场上通常采用纠删方式实现数据灾备。然而,在数据容灾过程中,由于没有考虑磁盘上电时数据上报和磁盘掉电时数据恢复对前端业务的影响,即数据上报和数据恢复会使CPU和内存占用率高升高,最终导致前端业务出现响应超时、数据重传等现象;另外,由于文件系统没有针对纠删特定场景进行适配,磁盘上电时数据数据上报和磁盘下电时数据恢复没有区分源数据与校验数据,造成不必要的纠删计算过程和等待。
因此,现有的基于纠删存储系统的磁盘存储方案没有考虑到纠删特性,节点重启或磁盘故障情况下会占用大量系统资源,造成前端业务响应慢,磁盘负载过大的现象。
发明内容
鉴于以上所述现有技术的缺点,本申请的目的在于提供一种基于纠删码的数据恢复控制方法、装置、设备及介质,用于解决现有技术中基于纠删码的数据恢复控制过程中,引起的前端业务响应慢,磁盘负载过大的问题。
为实现上述目的及其他相关目的,本申请提供一种基于纠删码的数据恢复控制方法,包括:
根据预设的纠删比存储数据,所述数据包括源数据和校验数据;
当磁盘上线时,加载所述源数据索引信息,待加载完成后,通过源数据加载标识表示源数据索引加载状态;然后,加载所述校验数据的索引信息,待加载完成后,通过校验数据加载标识表示校验数据索引加载状态;
根据所有的源数据加载标识和校验数据加载标识,控制数据上报,并优先获取源数据,待源数据处理完毕后,再对校验数据进行处理,完成数据恢复。
在本申请的另一目的在于提供一种基于纠删码的数据恢复控制装置,包括:
数据存储模块,适用于根据预设的纠删比存储数据,所述数据包括源数据和校验数据;
数据加载模块,适用于当磁盘上线时,加载所述源数据索引信息,待加载完成后,通过源数据加载标识表示源数据索引加载状态;然后,加载所述校验数据的索引信息,待加载完成后,通过校验数据加载标识表示校验数据索引加载状态;
数据恢复模块,适用于根据所有的源数据加载标识和校验数据加载标识,控制数据上报,并优先获取源数据,待源数据处理完毕后,再对校验数据进行处理,完成数据恢复。
在本申请的另一目的在于提供一种电子设备,包括:
一个或多个处理装置;
存储器,用于存储一个或多个程序;当所述一个或多个程序被所述一个或多个处理装置执行,使得所述一个或多个处理装置执行所述基于纠删码的数据恢复控制方法。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于重庆紫光华山智安科技有限公司,未经重庆紫光华山智安科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202110560113.7/2.html,转载请声明来源钻瓜专利网。
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置