[发明专利]数据迁移方法、系统、设备及产品有效
申请号: | 202111021512.2 | 申请日: | 2021-09-01 |
公开(公告)号: | CN113468135B | 公开(公告)日: | 2022-03-01 |
发明(设计)人: | 康俊彬;蔡乐;李飞飞;周星璇 | 申请(专利权)人: | 阿里云计算有限公司;阿里巴巴(中国)有限公司 |
主分类号: | G06F16/18 | 分类号: | G06F16/18;G06F16/21;G06F16/27 |
代理公司: | 北京太合九思知识产权代理有限公司 11610 | 代理人: | 刘戈;柴艳波 |
地址: | 310012 浙江省*** | 国省代码: | 浙江;33 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 数据 迁移 方法 系统 设备 产品 | ||
1.一种数据迁移方法,包括:
将第一节点上的待迁移对象在第一时刻时的数据信息及所述第一时刻之后产生的与所述待迁移对象有关的增量数据,传输至第二节点,以便所述第二节点迁入所述待迁移对象,并且所述第二节点需启动与第一节点上执行的第一节点事务对应的影子事务,所述影子事务的开始时间及提交时间需与所述第一节点事务相同;
获取反映所述待迁移对象迁移进度的参数;
在所述参数满足预置条件时,启动双运行工作模式;
在所述双运行工作模式下存在未提交的针对所述待迁移对象的第一节点事务时,将执行中产生的增量数据传输至所述第二节点;
在所述双运行工作模式下存在针对所述待迁移对象的第二节点事务时,将所述第二节点事务路由至所述第二节点,以由所述第二节点在完成所述待迁移对象的迁入并通过冲突检测后再执行所述第二节点事务。
2.根据权利要求1所述的方法,所述数据信息的生成方式包括:
生成所述待迁移对象在所述第一时刻时的快照;
获取所述待迁移对象中存储的在所述第一时刻之前提交的至少一个数据项版本;
将所述快照及所述至少一个数据项版本作为所述待迁移对象在所述第一时刻时的数据信息。
3.根据权利要求2所述的方法,将所述数据信息传输至第二节点,包括:
向所述第二节点发送携带有所述数据信息的存储请求,以便所述第二节点基于所述存储请求执行相应的存储事务,以将所述数据信息存储在已创建的目标对象中;
接收到所述第二节点反馈完成执行的响应后,向所述第二节点发送针对所述存储事务的提交通知,以便所述第二节点提交所述存储事务,并使得所述快照以一个最小的时间戳进行提交。
4.根据权利要求1至3中任一项所述的方法,将所述第一时刻后针对所述待迁移对象的修改信息传输至所述第二节点,包括:
获取所述待迁移对象的日志文件中时间戳晚于所述第一时刻的日志;
将获取到的、属于同一事务的多个日志存储在一个缓存队列中;
在所述缓存队列中存在反映事务提交的日志,且该反映事务提交的日志的提交时间戳晚于所述第一时刻时,将所述缓存队列中的多个日志传输至所述第二节点;
其中,所述修改信息即所述缓存队列中的多个日志。
5.根据权利要求1所述的方法,所述获取反映所述待迁移对象迁移进度的参数,包括:
获取所述第二节点反馈的未执行重做的日志数量;或者,
获取向所述第二节点传输数据的迭代次数。
6.根据权利要求1所述的方法,还包括:
发起因所述待迁移对象迁移引起对象与节点关系变化的修改事务,以便节点集群中的参与节点按照所述修改事务的指示修改本地存储的对象与节点的对应关系。
7.根据权利要求6所述的方法,所述发起因所述待迁移对象迁移引起对象与节点关系变化的修改事务,包括:
向所述节点集群中的参与节点发送有关所述修改事务的询问请求;
接收节点集群中参与节点返回的执行所述修改事务后的响应信息;
在接收到所述参与节点反馈的所述响应信息,并基于所述响应信息确定所述参与节点完成所述修改事务的执行时,向所述参与节点发送提交通知;
接收所述参与节点反馈的针对所述修改事务的提交响应。
8.根据权利要求7所述的方法,所述向所述节点集群中的参与节点发送有关所述修改事务的询问请求,包括:
向所述节点集群中的参与节点发送有关所述修改事务的询问请求,以便所述参与节点设定为准备刷新修改后对象与节点关系的准备状态,在所述节点集群的共享内存中刷新标识符的情况下所述参与节点刷新所述修改后对象与节点关系。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于阿里云计算有限公司;阿里巴巴(中国)有限公司,未经阿里云计算有限公司;阿里巴巴(中国)有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202111021512.2/1.html,转载请声明来源钻瓜专利网。
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置