[发明专利]基于分布式存储系统的数据归档方法、装置、计算机设备在审
申请号: | 201811185739.9 | 申请日: | 2018-10-11 |
公开(公告)号: | CN109542858A | 公开(公告)日: | 2019-03-29 |
发明(设计)人: | 管清政;王欣;汪洋 | 申请(专利权)人: | 平安科技(深圳)有限公司 |
主分类号: | G06F16/182 | 分类号: | G06F16/182;G06F16/13 |
代理公司: | 深圳市明日今典知识产权代理事务所(普通合伙) 44343 | 代理人: | 王杰辉 |
地址: | 518000 广东省深圳市福田区福*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 分布式存储系统 数据归档 存储路径 归档条件 扫描 计算机设备 文件转移 存储器 归档 储存 读取 分布式存储 记录扫描 人工参与 人力资源 申请 | ||
1.一种基于分布式存储系统的数据归档方法,其特征在于,所述方法包括:
扫描在分布式存储系统中的文件;
判断扫描到的文件是否符合数据归档策略的归档条件;
若所述扫描到的文件符合所述归档条件,则记录所述扫描到的文件的存储路径,获得第一存储路径;
根据所述第一存储路径,生成关于存储路径的目录列表;
读取所述目录列表,将所述第一存储路径对应在分布式存储系统中的文件转移至归档存储器中储存。
2.根据权利要求1所述的基于分布式存储系统的数据归档方法,其特征在于,在所述读取所述文件列表,将所述第一存储路径对应在分布式存储系统中的文件转移至归档存储器中储存的步骤之后,包括:
接收到前端API访问文件的请求;
判断待访问的文件是否储存在分布式存储系统中;
若所述待访问的文件是储存在分布式存储系统中,则允许所述请求。
3.根据权利要求2所述的基于分布式存储系统的数据归档方法,其特征在于,在所述接收到前端API访问文件的请求的步骤之前,包括:
记录从分布式存储系统转移至归档存储器的文件的转移记录;
在所述判断待访问的文件是否储存在分布式存储系统中的步骤之后,包括:
若所述待访问的文件不是储存在分布式存储系统中,则判断所述待访问的文件是否为从分布式存储系统转移至归档存储器的文件;
若所述待访问的文件为从分布式存储系统转移至归档存储器的文件,则获取所述待访问的文件在分布式存储系统中的存储路径;
根据所述转移记录,查找所述待访问的文件在分布式存储系统中的存储路径对应在归档存储器中的存储路径,获得第二存储路径;
将所述第二存储路径中的文件回调至所述待访问的文件在分布式存储系统中的存储路径;
在完成回调之后,允许所述请求。
4.根据权利要求3所述的基于分布式存储系统的数据归档方法,其特征在于,在所述在完成回调之后,允许所述请求的步骤之后,包括:
在所述前端API访问文件结束之后,将已回调在分布式存储系统中的文件再次转移至归档存储器中储存。
5.根据权利要求2所述的基于分布式存储系统的数据归档方法,其特征在于,在所述接收到前端API访问文件的请求的步骤之前,包括:
记录从分布式存储系统转移至归档存储器的文件的转移记录;
在所述判断待访问的文件是否储存在分布式存储系统中的步骤之后,包括:
若所述待访问的文件不是储存在分布式存储系统中,则判断所述待访问的文件是否为从分布式存储系统转移至归档存储器的文件;
若待访问的文件为从分布式存储系统转移至归档存储器的文件,则获取所述待访问的文件在分布式存储系统中的存储路径;
根据所述转移记录,查找所述待访问的文件在分布式存储系统中的存储路径对应在归档存储器中的存储路径,获得第二存储路径;
配置所述待访问的文件在分布式存储系统中的存储路径跳转至所述第二存储路径;
在完成配置之后,允许所述请求。
6.根据权利要求1所述的基于分布式存储系统的数据归档方法,其特征在于,在所述读取所述目录列表,将所述第一存储路径对应在分布式存储系统中的文件转移至归档存储器中储存的步骤中,包括:
读取所述目录列表;
根据所述目录列表,逐个将所述第一存储路径对应在分布式存储系统中的文件剪切到归档存储器中;或者
读取所述目录列表;
根据所述目录列表,逐个将所述第一存储路径对应在分布式存储系统中的文件复制到归档存储器中;
在完成复制之后,删除所述第一存储路径对应在分布式存储系统中的文件。
7.根据权利要求1所述的基于分布式存储系统的数据归档方法,其特征在于,所述数据归档策略包括时间条件归档策略或/和目录条件归档策略,所述时间条件归档策略为在指定时间之前的文件符合归档条件,所述目录条件归档策略为指定目录下的文件符合归档条件。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于平安科技(深圳)有限公司,未经平安科技(深圳)有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201811185739.9/1.html,转载请声明来源钻瓜专利网。