[发明专利]一种分布式文件系统的文件清理方法、装置、设备及介质在审
申请号: | 202210900699.1 | 申请日: | 2022-07-28 |
公开(公告)号: | CN115203130A | 公开(公告)日: | 2022-10-18 |
发明(设计)人: | 孙业宽 | 申请(专利权)人: | 济南浪潮数据技术有限公司 |
主分类号: | G06F16/11 | 分类号: | G06F16/11;G06F16/16;G06F16/172;G06F16/182 |
代理公司: | 北京集佳知识产权代理有限公司 11227 | 代理人: | 薛娇 |
地址: | 250101 山东省济南市自由贸易试验区*** | 国省代码: | 山东;37 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 分布式 文件系统 文件 清理 方法 装置 设备 介质 | ||
1.一种分布式文件系统的文件清理方法,其特征在于,应用于元数据服务器侧,包括:
依次遍历删除索引表中存储的文件,判断其创建时间与当前时间的差值是否超过预设的时间阈值,若是,则确定所述文件为待删除文件,若否,则停止遍历;其中,所述删除索引表中存储的所述文件为分布式存储系统中的所述文件,且排序方式为根据所述文件的创建时间先后进行排序;
将全部的所述待删除文件进行组合,以任务的形式下发到删除客户端,以便于所述删除客户端生成删除请求;
接收由所述删除客户端发送的所述删除请求;
根据所述删除请求删除所述待删除文件。
2.根据权利要求1所述的分布式文件系统的文件清理方法,其特征在于,所述删除索引表中存储的所述文件为分布式存储系统中的所述文件包括:
所述删除索引表中存储的所述文件为所述分布式存储系统中匹配删除策略的所述文件;
其中,所述删除策略预先由用户进行配置,包括:文件名、文件路径和文件大小。
3.根据权利要求2所述的分布式文件系统的文件清理方法,其特征在于,还包括:
每当所述文件在创建、读写、修改或访问时,判断所述文件是否匹配所述删除策略。
4.根据权利要求1所述的分布式文件系统的文件清理方法,其特征在于,所述删除索引表为多层结构。
5.根据权利要求1至4任意一项所述的分布式文件系统的文件清理方法,其特征在于,在根据所述删除请求删除所述待删除文件之前,还包括:
记录并保存各所述待删除文件的属性信息。
6.一种分布式文件系统的文件清理方法,其特征在于,应用于删除客户端侧,包括:
接收由元数据服务器发送的删除任务;其中,所述删除任务为待删除文件以任务形式的组合;所述待删除文件为所述元数据服务器依次遍历以文件创建时间顺序存储在删除索引表中的各文件,并判断当前遍历的所述文件的创建时间与当前时间的差值超过预设的时间阈值时所确定的;且遍历过程在首次判断到所述文件的创建时间与当前时间的差值不超过所述时间阈值时停止;
根据所述删除任务生成删除请求,并发送至所述元数据服务器。
7.一种分布式文件系统的文件清理装置,其特征在于,应用于元数据服务器侧,包括:
文件遍历模块,用于依次遍历删除索引表中存储的文件,判断其创建时间与当前时间的差值是否超过预设的时间阈值,若是,则确定所述文件为待删除文件,若否,则停止遍历;其中,所述删除索引表中存储的所述文件为分布式存储系统中的所述文件,且排序方式为根据所述文件的创建时间先后进行排序;
任务生成模块,用于将全部的所述待删除文件进行组合,以任务的形式下发到删除客户端,以便于所述删除客户端生成删除请求;
请求接收模块,用于接收由所述删除客户端发送的所述删除请求;
文件删除模块,用于根据所述删除请求删除所述待删除文件。
8.一种分布式文件系统的文件清理装置,其特征在于,应用于删除客户端侧,包括:
任务接收模块,用于接收由元数据服务器发送的删除任务;其中,所述删除任务为待删除文件以任务形式的组合;所述待删除文件为所述元数据服务器依次遍历以文件创建时间顺序存储在删除索引表中的各文件,并判断当前遍历的所述文件的创建时间与当前时间的差值超过预设的时间阈值时所确定的;且遍历过程在首次判断到所述文件的创建时间与当前时间的差值不超过所述时间阈值时停止;
请求发送模块,用于根据所述删除任务生成删除请求,并发送至所述元数据服务器。
9.一种分布式文件系统的文件清理设备,其特征在于,包括:
存储器,用于存储计算机程序;
处理器,用于执行所述计算机程序时实现如权利要求1至6任意一项所述的分布式文件系统的文件清理方法的步骤。
10.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质上存储有计算机程序,所述计算机程序被处理器执行时实现如权利要求1至6任意一项所述的分布式文件系统的文件清理方法的步骤。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于济南浪潮数据技术有限公司,未经济南浪潮数据技术有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202210900699.1/1.html,转载请声明来源钻瓜专利网。
- 上一篇:一种多路径设备检测方法、装置、设备、存储介质
- 下一篇:耳廓再造定位尺