[发明专利]一种基于文件存储的备份实现方法在审
申请号: | 202011547088.0 | 申请日: | 2020-12-24 |
公开(公告)号: | CN112650621A | 公开(公告)日: | 2021-04-13 |
发明(设计)人: | 董信超;靳登科;李菲菲;高传集;于昊 | 申请(专利权)人: | 浪潮云信息技术股份公司 |
主分类号: | G06F11/14 | 分类号: | G06F11/14 |
代理公司: | 济南信达专利事务所有限公司 37100 | 代理人: | 冯春连 |
地址: | 250100 山东省济南市高*** | 国省代码: | 山东;37 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 基于 文件 存储 备份 实现 方法 | ||
本发明公开一种基于文件存储的备份实现方法,涉及文件存储技术领域,采用技术方案包括:搭建分布式存储系统ceph集群,创建文件存储所需的数据池和元数据池,创建cephfs服务,安装ganesha服务,将cephfs协议转换到nfs协议;在用户发出备份请求时,ceph集群开启快照模式,在文件存储的快照目录中生成文件存储实例的快照,在非快照目录中拉取文件存储实例的快照生成实例备份,通过tar命令打包生成的实例备份,并进一步生成全量备份的tar包和tar包的全量快照;原始数据发生变化,对比之前生成tar包的全量快照,生成增量的tar包快照,然后将全量的tar包快照和新生成的增量快照上传到对象存储中。本发明可以减少备份生成时所占用的临时空间,缩短备份上传的时间周期。
技术领域
本发明涉及文件存储技术领域,具体的说是一种基于文件存储的备份实现方法。
背景技术
近随着云时代的到来,存储数据、分析数据、共享信息不在局限于传统的硬盘上。传统的硬盘对于业务的支撑存在造价高、不易于扩容、不易于分享的缺点。2006年亚马逊退出了简易存储服务也就是云存储产品,开启了云存储服务的发展。
云存储服务发展阶段,存储技术经历了云硬盘、文件存储、对象存储的发展阶段。其中,文件存储以低廉的价格,可以共享数据以及在线编辑的特点,在交通和金融行业有广泛的应用。文件存储采用NFS或CIFS命令集访问数据,以文件为传输协议,通过TCP/IP实现网络化存储,可扩展性好、价格便宜、用户易管理,如目前在集群计算中应用较多的NFS文件系统,但由于NAS的协议开销高、带宽低、延迟大,不利于在高性能集群中应用。
既然数据存在文件存储中,那么就要保证数据的安全性和可靠性。备份在保证数据的安全性和可恢复性上具有统治地位。传统文件存储备份会出现无法增量备份,或者备份时要预留出一定的空间才可以操作,给予用户的体验感是很差的。往往因为备份时间过长,或者空间不足导致备份失败,进而这个功能被弃用或者遗忘。一旦发生不可逆转的数据破坏,用户和运营商会处于尴尬的境地。
发明内容
本发明针对目前技术发展的需求和不足之处,提供一种基于文件存储的备份实现方法,避免了无法增量备份的问题,解决了每次备份都会全量备份的痛点。
本发明的一种基于文件存储的备份实现方法,解决上述技术问题采用的技术方案如下:
一种基于文件存储的备份实现方法,其实现内容包括:
搭建分布式存储系统ceph集群,创建文件存储所需的数据池和元数据池,并基于数据池和元数据池创建cephfs服务,随后在ceph集群外安装ganesha服务,将cephfs协议转换到nfs协议;
在用户登录云平台发起创建文件存储实例的请求时,在cephfs服务中生成1个文件存储实例和对应的实例挂载点,用户登录虚机后,通过挂载点信息进行挂载文件存储和使用;
在用户发出备份请求时,ceph集群开启快照模式,在文件存储的快照目录中生成文件存储实例的快照,在非快照目录中拉取文件存储实例的快照生成实例备份,通过tar命令打包生成的实例备份,并进一步生成全量备份的tar包和tar包的全量快照,将全量备份的快照和tar包的全量快照上传到对象存储服务中;
当原始数据发生变化,拉取对象存储中的tar包的快照到本地进行对比,发生变化的数据会生成一个新的增量tar包的快照,并将之前生成tar包的全量快照和新生成的增量tar包快照一起上传到对象存储服务中。
进一步的,在搭建分布式存储系统ceph集群后,安装文件存储和对象存储所需的组件mds和rgw网关。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于浪潮云信息技术股份公司,未经浪潮云信息技术股份公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202011547088.0/2.html,转载请声明来源钻瓜专利网。