[发明专利]基于共享SST文件的增量备份、恢复方法和系统有效
申请号: | 202211612061.4 | 申请日: | 2022-12-15 |
公开(公告)号: | CN115617580B | 公开(公告)日: | 2023-03-28 |
发明(设计)人: | 宋鹏威;王玉珏;叶小萌 | 申请(专利权)人: | 杭州欧若数网科技有限公司 |
主分类号: | G06F11/14 | 分类号: | G06F11/14 |
代理公司: | 杭州创智卓英知识产权代理事务所(普通合伙) 33324 | 代理人: | 朱秀琴 |
地址: | 311100 浙江省杭州市余杭区仓前街道时代未来之城5幢*** | 国省代码: | 浙江;33 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 基于 共享 sst 文件 增量 备份 恢复 方法 系统 | ||
本申请涉及一种基于共享SST文件的增量备份恢复方法,其中,该方法包括:获取数据库中待执行的本地文件,确定备份任务对应的备份组,在备份组中,获取历次备份产生的SST文件集合,以及根据SST文件的唯一标识名,判断本地文件中的各个SST文件,是否已存储在SST文件集合中,若是,将其记为现有SST文件,若否,将其记为新增SST文件,以及上传WAL文件和新增SST文件至备份组,并对各个现有SST文件创建对应的link文件,将link文件上传至备份组;获取备份组的网络地址,根据网络地址下载备份组中的所有SST文件和WAL文件。通过本申请,充分利用LSM‑Tree的特点,使用共享SST的方式,省去了恢复时回放的过程,解决了增量备份及恢复技术效率较差的问题,从而提升了恢复速度。
技术领域
本申请涉及数据库管理领域,特别是涉及一种基于共享SST文件的增量备份及恢复方法和系统。
背景技术
为了保证数据的高可用,备份和恢复功能是数据库最重要、常用的功能之一。数据库在实现上通常分为查询层和存储层,备份和恢复功能通常在存储层上执行。
在相关技术中,常见的增量备份方案多是基于WAL(Write-Ahead Logging,写前日志)进行增量备份,即当数据到达一定量级之后,为了加快备份速度,只对新增的数据进行备份。
但是,采用上述方法,若增量备份次数较多,在数据恢复时,会花费很长时间,将之前历次增量备份中产生的写前日志回放到全量备份数据中,如果增量备份次数较多,这个“回放”的过程消耗时间过长,从而导致服务长时间不可用。
目前,针对相关技术中,增量备份及恢复技术效率较差的问题,尚未提出有效的解决方案。
发明内容
本申请实施例提供了一种基于共享SST文件放入增量恢复方法、系统、计算机设备和计算机可读存储介质,以至少解决相关技术中增量备份及恢复技术效率较差的问题。
第一方面,本申请实施例提供了一种基于共享SST文件的增量备份恢复方法,所述方法包括:
备份流程,包括:获取数据库中待执行的本地文件,其中,所述数据库采用LSM树架构,所述本地文件包括写前日志和多个SST文件,
确定备份任务对应的备份组,在所述备份组中,获取历次备份产生的SST文件集合,以及
根据所述SST文件的唯一标识名,判断所述本地文件中的各个SST文件,是否已存储在所述SST文件集合中,若是,将其记为现有SST文件,若否,将其记为新增SST文件,以及
上传所述写前日志和所述新增SST文件至所述备份组,并对各个现有SST文件创建对应的link文件,将所述link文件上传至所述备份组;
恢复流程,包括:获取所述备份组的网络地址,根据所述网络地址下载所述备份组中的所有SST文件和写前日志。
在其中一些实施例中,根据所述网络地址下载所述备份组中的所有SST文件和写前日志,包括:
根据所述link文件,判断所述备份组中存储的各项SST文件,是否为所述新增SST文件;
若是,直接根据所述网络地址下载所述新增SST文件,
若否,获取所述现有SST文件对应的link文件,并根据所述link文件中记录的链接地址,下载所述现有SST文件。
在其中一些实施例中,所述根据所述链接地址下载所述备份组中的所有SST文件和写前日志之后,所述方法还包括:
基于所述写前日志 、所述现有SST文件和新增SST文件,启动存储引擎;
在启动存储引擎之后,所述数据库对外提供服务。
在其中一些实施例中,所述方法还包括:
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于杭州欧若数网科技有限公司,未经杭州欧若数网科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202211612061.4/2.html,转载请声明来源钻瓜专利网。