[发明专利]一种数据迁移方法、装置和系统在审
申请号: | 201911244706.1 | 申请日: | 2019-12-06 |
公开(公告)号: | CN111125058A | 公开(公告)日: | 2020-05-08 |
发明(设计)人: | 苏志恒;张立强 | 申请(专利权)人: | 浪潮电子信息产业股份有限公司 |
主分类号: | G06F16/21 | 分类号: | G06F16/21;G06F16/27 |
代理公司: | 北京集佳知识产权代理有限公司 11227 | 代理人: | 史翠 |
地址: | 250101 山东*** | 国省代码: | 山东;37 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 数据 迁移 方法 装置 系统 | ||
1.一种数据迁移方法,其特征在于,适用于元数据端,所述方法包括:
依据存储介质的类型以及所述存储介质上文件的访问热度,构建待迁移文件列表;
当待迁移文件的数据量大于或等于预设阈值时,则依据各客户端的当前负载量,向满足负载要求的目标客户端下发文件迁移任务,直至所述待迁移文件列表中的所有文件完成迁移,则结束操作。
2.根据权利要求1所述的方法,其特征在于,所述依据存储介质的类型以及所述存储介质上文件的访问热度,构建待迁移文件列表包括:
统计存储在慢速存储介质上且访问热度大于第一阈值的文件,以构建第一待迁移文件列表;
统计存储在快速存储介质上且访问热度小于第二阈值的文件,以构建第二待迁移文件列表。
3.根据权利要求1所述的方法,其特征在于,在所述依据各客户端的当前负载量,向满足负载要求的目标客户端下发文件迁移任务之后还包括:
当检测到所述待迁移文件列表中的当前文件正在被访问时,则停止对所述当前文件执行迁移操作。
4.根据权利要求1-3任意一项所述的方法,其特征在于,在依据各客户端的当前负载量,向满足负载要求的目标客户端下发文件迁移任务之前还包括:
将所述待迁移文件列表记录到日志中;
相应的,在所述依据各客户端的当前负载量,向满足负载要求的目标客户端下发文件迁移任务之后还包括:
当接收到所述目标客户端反馈的迁移成功的消息时,将已完成迁移的文件列表记录到日志中。
5.一种数据迁移装置,其特征在于,适用于元数据端,所述装置包括构建单元和下发单元;
所述构建单元,用于依据存储介质的类型以及所述存储介质上文件的访问热度,构建待迁移文件列表;
所述下发单元,用于当待迁移文件的数据量大于或等于预设阈值时,则依据各客户端的当前负载量,向满足负载要求的目标客户端下发文件迁移任务,直至所述待迁移文件列表中的所有文件完成迁移,则结束操作。
6.一种数据迁移方法,其特征在于,适用于客户端,所述方法包括:
接收到元数据端下发的文件迁移任务时,依据所述文件迁移任务中携带的文件数据量,启动相应个数的迁移进程;
利用各所述迁移进程对所述文件迁移任务所指定的文件执行迁移操作。
7.根据权利要求6所述的方法,其特征在于,所述利用各所述迁移进程对所述文件迁移任务所指定的文件执行迁移操作包括:
利用各所述迁移进程将待迁移文件的数据从原存储介质中读取;
将读取出的数据进行聚合,得到相应的目标文件,并将所述目标文件存储至新的存储介质中。
8.根据权利要求6所述的方法,其特征在于,在所述利用各所述迁移进程对所述文件迁移任务所指定的文件执行迁移操作之后还包括:
当完成对所述文件迁移任务所指定的所有文件的迁移操作之后,向所述元数据端反馈迁移成功的消息。
9.一种数据迁移装置,其特征在于,适用于客户端,所述装置包括启动单元和迁移单元;
所述启动单元,用于接收到元数据端下发的文件迁移任务时,依据所述文件迁移任务中携带的文件数据量,启动相应个数的迁移进程;
所述迁移单元,用于利用各所述迁移进程对所述文件迁移任务所指定的文件执行迁移操作。
10.一种数据迁移系统,其特征在于,包括元数据端和客户端;
所述元数据端,用于依据存储介质的类型以及所述存储介质上文件的访问热度,构建待迁移文件列表;当待迁移文件的数据量大于或等于预设阈值时,则依据各客户端的当前负载量,向满足负载要求的目标客户端下发文件迁移任务,直至所述待迁移文件列表中的所有文件完成迁移,则结束操作;
所述客户端,用于接收到元数据端下发的文件迁移任务时,依据所述文件迁移任务中携带的文件数据量,启动相应个数的迁移进程;利用各所述迁移进程对所述文件迁移任务所指定的文件执行迁移操作。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于浪潮电子信息产业股份有限公司,未经浪潮电子信息产业股份有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201911244706.1/1.html,转载请声明来源钻瓜专利网。
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置