[发明专利]一种基于虚拟数据副本管理的方法及装置在审
申请号: | 202111346539.9 | 申请日: | 2021-11-15 |
公开(公告)号: | CN116126586A | 公开(公告)日: | 2023-05-16 |
发明(设计)人: | 钱俊凤;张庆伟;纪元;付鋆;袁捷;缪新萍;马艳洁;王杰峰;朱州;张克贤;郭仁超;杨濡蔓;刘可 | 申请(专利权)人: | 贵州电网有限责任公司 |
主分类号: | G06F11/14 | 分类号: | G06F11/14 |
代理公司: | 成都玖和知识产权代理事务所(普通合伙) 51238 | 代理人: | 王海权 |
地址: | 550000 贵*** | 国省代码: | 贵州;52 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 基于 虚拟 数据 副本 管理 方法 装置 | ||
本发明公开了一种基于虚拟数据副本管理的方法及装置,采用非线性快照管理和基于Bitmap提供对Block变化数据跟踪技术,通过增量数据合成一份该时间点的全量备份数据,大大缩短备份窗口,有效减少备份时间,减少备份对业务系统服务器性能的影响,减少了数据丢失的风险。
技术领域
本发明涉及数据备份技术领域,特别涉及一种基于虚拟数据副本管理方法。
背景技术
随着计算机技术的高速发展,互联网、大数据、AI、云等技术的不断发展,企业业务数据的体积变得越来越庞大,往往达到TB级别的数据量,超过100TB数据量的企业也越来越多,在数据量越来越大的情况下,备份窗口变得越来越长,10TB的数据需要10小时才能备份下来,数据恢复更要2倍以上的时间,数据量与备份窗口成线性增加,这对备份窗口和数据恢复时间的挑战越来越大。
传统备份软件是基于磁带技术为核心发展起来的,虽然经过多年的发展,备份介质从磁带发展到虚拟带库和备份一体机,但核心技术并没有太大的改变,备份格式仍然是磁带备份格式,每周的备份策略仍为完全备份+增量备份,或完全备份+差异备份的方式,由于数据量的不断增加和备份窗口时间所限,只能做到每周一次完全备份,无法做到每天一次完全备份,无论完全备份+增量备份或完全备份+差异备份方式,恢复的时候需要依赖之前的完全备份记录,出问题的风险较大。当出现灾难性故障需要从备份数据副本中恢复数据时,恢复时间往往是备份时间的数倍,无法做到在短时间内完成数据的快速恢复,无法达到从备份数据快速恢复业务的效果,RTO压力巨大。
由于现在的企业对业务系统依赖性非常高,业务系统数据也变得越来越重要,一但发生数据丢失事故,企业的损失可能无法估计,而备份的目的是为了保护数据免受意外的损失,在出现自然灾害、病毒侵入、人为破坏、操作失误或系统故障等情况下把故障造成的损失降到最低,在海量数据环境下传统备份无法做到每天一次或多次完全备份,从而数据丢失的风险也随之增加。
发明内容
有鉴于此,本发明的目的之一是提供一种基于虚拟数据副本管理方法。能够有效减少备份时间,减少备份对业务系统服务器性能的影响,降低数据丢失的风险。
本发明的目的之一是通过以下技术方案实现的:
本发明的一种基于虚拟数据副本管理的方法,包括
获取首次全量数据;
采用基于Bitmap的Block变化数据跟踪技术,获取增量数据;
全量数据合成;
完成该时该点的全量备份数据,实现全量数据的快速备份。
进一步,获取首次全量数据,是指系统通过应用API接口,获取第一次全量数据后,系统产生一份Bitmap,Bitmap的Block变化数据作为增量数据获取和增量合成的基础数据。
进一步,获取增量数据,是指在上一次数据获取后到本次数据获取时间点的变化数据,根据Bitmap上的变化记录,获取发生变化的Block此时间点的真实数据。
进一步,全量数据合成,是指增量数据获取后,根据该时间点的Bitmap,增量数据按Block的位置直接对Staging Disk的全量数据进行修改,再对修改后的数据进行快照,从而合成为该时间点的全量数据。
进一步,在首次全量数据获取后生成第一份Bitmap,第二份Bitmap对增量部分Block的变化情况进行记录,在进行增量数据获取时,只对Bitmap中记录有变化的Block进行增量数据获取。
进一步,获取增量数据后,把增量数据按Block的位置直接对Staging Disk的全量数据进行修改,再对修改后的Staging Disk进行快照,从而获取该时间点的合成全量数据,并生成新的全量数据Bitmap,作为下一次数据获取的依据。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于贵州电网有限责任公司,未经贵州电网有限责任公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202111346539.9/2.html,转载请声明来源钻瓜专利网。
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置