[发明专利]一种数据迁移的方法、装置、设备及存储介质有效
申请号: | 202110722791.9 | 申请日: | 2021-06-29 |
公开(公告)号: | CN113342781B | 公开(公告)日: | 2023-07-11 |
发明(设计)人: | 冯舟;汤明明;黄博;范增虎;江旻 | 申请(专利权)人: | 深圳前海微众银行股份有限公司 |
主分类号: | G06F16/21 | 分类号: | G06F16/21 |
代理公司: | 北京派特恩知识产权代理有限公司 11270 | 代理人: | 王花丽;张颖玲 |
地址: | 518052 广东省深圳市*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 数据 迁移 方法 装置 设备 存储 介质 | ||
本申请提供一种数据迁移的方法、数据迁移的装置、数据迁移的设备及计算机可读存储介质,其中,方法包括:获取全局命名服务对应的动态每秒事务处理量阈值;基于动态每秒事务处理量阈值,从待搬迁的S个源数据中心节点中确定s个源数据中心节点;若接收到针对第m个源数据中心节点的第r次数据迁移请求,基于轮训加权算法,确定与第m个源数据中心节点具有映射关系的n个目标数据中心节点的当前动态调度权值,其中,m、r为大于1的正整数,n为大于等于2的正整数;基于n个目标数据中心节点的当前动态调度权值,从n个目标数据中心节点中选择一个候选数据中心节点;将源数据中心节点的数据迁移到候选数据中心节点的数据库中。
技术领域
本申请实施例涉及金融科技(Fintech)的数据处理技术领域,涉及但不限于一种数据迁移的方法、数据迁移的装置、数据迁移的设备及计算机可读存储介质。
背景技术
随着计算机技术的发展,越来越多的技术应用在金融领域,传统金融业正在逐步向金融科技(Fintech)转变,然而,由于金融行业的安全性、实时性要求,金融科技也对技术提出了更高的要求。
金融科技领域下,目前针对海量数据采用的是不停服迁移方案,该方案为“在线双写机制”,即在写原有的数据库的同时也写一份数据到新的库表中。因此写一个后台迁移数据的程序,将旧库的数据通过数据库中间件迁移到新的多库表中。然而,数据库中间件只能基于数据中心节点(Data Center Node,DCN)固定的搬迁数据权重进行数据迁移,一旦权重配置错了,由于无法在搬迁过程中修改,会造成系统不可用的风险。
发明内容
本申请实施例提供一种数据迁移的方法、数据迁移的装置、数据迁移的设备及计算机可读存储介质,以解决相关技术中数据库中间件只能基于DCN固定的搬迁数据权重进行数据迁移,一旦权重配置错了,由于无法在搬迁过程中修改,会造成系统不可用的风险的问题,实现了源数据库数据搬迁到目标数据库的权重动态调整,提升系统的稳定性。
本申请实施例的技术方案是这样实现的:
本申请实施例提供一种数据迁移的方法,包括:
获取全局命名服务对应的动态每秒事务处理量阈值;
基于所述动态每秒事务处理量阈值,从待搬迁的S个源数据中心节点中确定s个源数据中心节点,其中,所述s个源数据中心节点包括第m个源数据中心节点,所述s为大于等于所述m的正整数,所述S为大于等于所述s的正整数;
若接收到针对第m个源数据中心节点的第r次数据迁移请求,基于轮训加权算法,确定与所述第m个源数据中心节点具有映射关系的n个目标数据中心节点的当前动态调度权值,其中,所述m、r为大于1的正整数,所述n为大于等于2的正整数;
基于n个目标数据中心节点的当前动态调度权值,从所述n个目标数据中心节点中选择一个候选数据中心节点;
将所述源数据中心节点的数据迁移到所述候选数据中心节点的数据库中。
一种数据迁移的装置,包括:
处理模块,用于若接收到针对第m个源数据中心节点的第r次数据迁移请求,基于轮训加权算法,确定与所述第m个源数据中心节点具有映射关系的n个目标数据中心节点的当前动态调度权值,其中,所述m、r为大于1的正整数,所述n为大于等于2的正整数;
所述处理模块,用于基于n个目标数据中心节点的当前动态调度权值,从所述n个目标数据中心节点中选择一个候选数据中心节点;
迁移模块,用于将所述源数据中心节点的数据迁移到所述候选数据中心节点的数据库中。
本申请实施例提供一种设备,包括:
存储器,用于存储可执行指令;处理器,用于执行存储器中存储的可执行指令时,实现上述的方法。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于深圳前海微众银行股份有限公司,未经深圳前海微众银行股份有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202110722791.9/2.html,转载请声明来源钻瓜专利网。
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置