[发明专利]基于nbd设备的数据迁移方法、装置、设备及存储介质有效
申请号: | 201910479031.2 | 申请日: | 2019-05-31 |
公开(公告)号: | CN110333823B | 公开(公告)日: | 2023-07-07 |
发明(设计)人: | 王新 | 申请(专利权)人: | 平安科技(深圳)有限公司 |
主分类号: | G06F3/06 | 分类号: | G06F3/06 |
代理公司: | 深圳市世纪恒程知识产权代理事务所 44287 | 代理人: | 胡海国 |
地址: | 518000 广东省深圳市福田区福*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 基于 nbd 设备 数据 迁移 方法 装置 存储 介质 | ||
1.一种基于nbd设备的数据迁移方法,其特征在于,所述基于nbd设备的数据迁移方法应用于Ceph分布式系统中的Ceph客户端,所述Ceph客户端中包括本地磁盘,所述Ceph分布式系统还包括Ceph集群,所述基于nbd设备的数据迁移方法包括:
在检测到rbd-nbd进程启动时,在所述Ceph客户端获取所述rbd-nbd进程对应的目标nbd设备;
若检测到基于所述目标nbd设备进行读写业务处理请求时,判断所述读写业务处理请求所请求的目标数据是否已从所述本地磁盘迁移至所述Ceph集群;
获取目标数据在本地磁盘中的存储地址,获取该存储地址在本地磁盘迁移数据时的迁移顺序,根据该迁移顺序确定该目标数据计数;
若所述目标数据未从所述本地磁盘迁移至所述Ceph集群,则从所述本地磁盘中读取所述目标数据,并基于所述rbd-nbd进程将所述目标数据发送给所述Ceph集群;
所述若检测到基于所述目标nbd设备进行读写业务处理请求时,判断所述读写业务处理请求所请求的目标数据是否已从所述本地磁盘迁移至所述Ceph集群步骤之前包括:
启动所述目标nbd设备,实时从所述本地磁盘中读取待迁移数据至所述目标nbd设备中;
建立已迁移至所述目标nbd设备中的待迁移数据的迁移计数;
基于所述rbd-nbd进程,将迁移至所述目标nbd设备中的所述待迁移数据迁移至所述Ceph集群中;
当目标数据的数据量较大时,需要从本地磁盘中读取目标数据中的一部分,另一部分从Ceph集群中获取。
2.如权利要求1所述的基于nbd设备的数据迁移方法,其特征在于,所述启动所述目标nbd设备,实时从所述本地磁盘中读取待迁移数据至所述目标nbd设备中步骤之后包括:
建立所述已迁移至所述目标nbd设备中的待迁移数据的迁移计数;
每检测到所述已迁移至所述目标nbd设备中的待迁移数据达到预设数据量时,进行所述迁移计数的预设加量处理。
3.如权利要求2所述的基于nbd设备的数据迁移方法,其特征在于,所述若检测到基于所述目标nbd设备进行读写业务处理请求时,判断所述读写业务处理请求所请求的目标数据是否已从所述本地磁盘迁移至所述Ceph集群步骤包括:
若检测到基于所述目标nbd设备进行读写业务处理请求时,获取所述读写业务处理请求所请求的目标数据对应的目标数据计数;
若所述目标数据计数小于等于所述迁移计数时,则判定所述读写业务处理请求所请求的目标数据已从所述本地磁盘迁移至所述Ceph集群中。
4.如权利要求3所述的基于nbd设备的数据迁移方法,其特征在于,所述若所述目标数据计数小于等于所述迁移计数时,则判定所述读写业务处理请求所请求的目标数据已从所述本地磁盘迁移至所述Ceph集群中步骤之后包括:
基于所述rbd-nbd进程,从所述Ceph集群中读取所述目标数据,并将所述目标数据返回给所述目标nbd设备。
5.如权利要求3所述的基于nbd设备的数据迁移方法,其特征在于,所述获取所述读写业务处理请求所请求的目标数据对应的目标数据计数步骤之后包括:
若所述目标数据计数大于所述迁移计数时,判断在预置跳跃记录表中是否查找到与所述目标数据计数一致的计数编号,其中,所述跳跃记录表中记录未顺序迁移的数据;
若在跳跃记录表中查找到与所述目标数据计数一致的计数编号,则从所述Ceph集群中读取所述目标数据,并将所述目标数据返回给所述目标nbd设备;
若未在跳跃记录表中查找到与所述目标数据计数一致的计数编号,则从所述本地磁盘中读取所述目标数据,并将所述目标数据返回给所述目标nbd设备。
6.如权利要求5所述的基于nbd设备的数据迁移方法,其特征在于,所述若所述目标数据未从所述本地磁盘迁移至所述Ceph集群,则从所述本地磁盘中读取所述目标数据,并基于所述rbd-nbd进程将所述目标数据发送给所述Ceph集群步骤之后包括:
将所述目标数据对应的目标数据计数添加至所述跳跃记录表中,以避免所述目标数据的重复迁移。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于平安科技(深圳)有限公司,未经平安科技(深圳)有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201910479031.2/1.html,转载请声明来源钻瓜专利网。
- 上一篇:一种加速特定数据的读写以及读取方法
- 下一篇:一种存储系统的扩容方法和装置
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置