[发明专利]一种文件迁移方法、装置、设备及可读存储介质有效
申请号: | 202010850086.2 | 申请日: | 2020-08-21 |
公开(公告)号: | CN111984196B | 公开(公告)日: | 2022-08-19 |
发明(设计)人: | 孙业宽;孟祥瑞 | 申请(专利权)人: | 苏州浪潮智能科技有限公司 |
主分类号: | G06F3/06 | 分类号: | G06F3/06;G06F12/02;G06F16/185;G06F16/16 |
代理公司: | 北京集佳知识产权代理有限公司 11227 | 代理人: | 徐丽 |
地址: | 215100 江苏省苏州市吴*** | 国省代码: | 江苏;32 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 文件 迁移 方法 装置 设备 可读 存储 介质 | ||
1.一种文件迁移方法,其特征在于,包括:
接收文件迁移任务;
判断所述文件迁移任务是否为未完成任务;
如果是,则从所述迁移任务对应位于目的存储池中的聚合大文件和各个位于源存储池中的小文件中,确定出无效文件;所述聚合大文件中具有将各个所述小文件经聚合而分别对应的迁移小文件;
对所述无效文件进行垃圾回收;
从所述文件迁移任务对应位于目的存储池中的聚合大文件和各个位于源存储池中的小文件中,确定出无效文件,包括:
获取各个所述小文件的聚合属性;
利用所述聚合属性,从所述聚合大文件和各个所述小文件中,确定出所述无效文件;
其中,利用所述聚合属性,从所述聚合大文件和各个所述小文件中,确定出所述无效文件,包括:
判断所述聚合属性是否变化;
如果是,则确定对应的所述小文件为所述无效文件;
如果否,则确定存储于所述聚合大文件中对应的所述迁移小文件为无效文件。
2.根据权利要求1所述的文件迁移方法,其特征在于,对所述无效文件进行垃圾回收,包括:
若所述无效文件为所述小文件,则删除所述源存储池中的所述小文件;
若所述无效文件为所述迁移小文件,则对所述聚合大文件进行碎片回收处理。
3.根据权利要求2所述的文件迁移方法,其特征在于,对所述聚合大文件进行碎片回收处理,包括:
获取所述聚合大文件的文件头信息;
利用所述文件头信息,确定出所述聚合大文件中的无效数据比例;
在所述无效数据比例大于阈值的情况下,将所述聚合大文件中的有效数据迁移至目标聚合大文件中并删除所述聚合大文件。
4.根据权利要求2所述的文件迁移方法,其特征在于,对所述聚合大文件进行碎片回收处理,包括:
获取所述聚合大文件中各个文件对应的聚合属性;
将所述聚合属性未发生变化的文件确定为无效数据,并统计无效数据比例;
在所述无效数据比例大于阈值的情况下,将所述聚合大文件中的有效数据迁移至目标聚合大文件中并删除所述聚合大文件。
5.根据权利要求1至4任一项所述的文件迁移方法,其特征在于,所述接收文件迁移任务,包括:
接收元数据服务器发送的所述文件迁移任务;
相应地,在完成对所述无效文件进行垃圾回收的情况下,还包括:
向所述元数据服务器反馈清理应答数据。
6.一种文件迁移装置,其特征在于,包括:
任务接收模块,用于接收文件迁移任务;
判断模块,用于判断所述文件迁移任务是否为未完成任务;
无效文件确定模块,用于如果判断结果为是,则从所述文件迁移任务对应位于目的存储池中的聚合大文件和各个位于源存储池中的小文件中,确定出无效文件;所述聚合大文件具有将各个所述小文件经聚合而分别对应的迁移小文件;
垃圾回收处理模块,用于对所述无效文件进行垃圾回收;
无效文件确定模块,具体用于获取各个所述小文件的聚合属性;利用所述聚合属性,从所述聚合大文件和各个所述小文件中,确定出所述无效文件;其中,利用所述聚合属性,从所述聚合大文件和各个所述小文件中,确定出所述无效文件,包括:
判断所述聚合属性是否变化;
如果是,则确定对应的所述小文件为所述无效文件;
如果否,则确定存储于所述聚合大文件中对应的所述迁移小文件为无效文件。
7.一种文件迁移设备,其特征在于,包括:
存储器,用于存储计算机程序;
处理器,用于执行所述计算机程序时实现如权利要求1至5任一项所述文件迁移方法的步骤。
8.一种可读存储介质,其特征在于,所述可读存储介质上存储有计算机程序,所述计算机程序被处理器执行时实现如权利要求1至5任一项所述文件迁移方法的步骤。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于苏州浪潮智能科技有限公司,未经苏州浪潮智能科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202010850086.2/1.html,转载请声明来源钻瓜专利网。