[发明专利]数据同步方法、装置、计算机设备和可读存储介质在审
申请号: | 202011610559.8 | 申请日: | 2020-12-30 |
公开(公告)号: | CN112765265A | 公开(公告)日: | 2021-05-07 |
发明(设计)人: | 钟文宇;方琴;杨阳;朱兵兵 | 申请(专利权)人: | 杭州贝嘟科技有限公司 |
主分类号: | G06F16/27 | 分类号: | G06F16/27 |
代理公司: | 杭州华进联浙知识产权代理有限公司 33250 | 代理人: | 聂磊 |
地址: | 310016 浙江省杭州市*** | 国省代码: | 浙江;33 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 数据 同步 方法 装置 计算机 设备 可读 存储 介质 | ||
1.一种数据同步方法,其特征在于,所述方法包括:
获取同步任务执行指令,并基于所述同步任务执行指令获取同步任务信息,所述同步任务信息包括同步任务时间信息和同步任务配置信息;
基于所述同步任务信息确定目标节点信息,所述目标节点信息包括多个目标分布式处理节点以及每一所述目标分布式处理节点的节点名称;
将所述同步任务信息和所述目标节点信息发送至多个所述目标分布式处理节点,以使多个所述目标分布式处理节点获取增量数据,并将所述增量数据同步存储至目标数据库中。
2.根据权利要求1所述的方法,其特征在于,所述将所述同步任务信息和所述目标节点信息发送至多个所述目标分布式处理节点,以使多个所述目标分布式处理节点获取增量数据,并将所述增量数据同步存储至目标数据库中包括:
将所述同步任务信息和所述目标节点信息发送至多个所述目标分布式处理节点,以使每一所述目标分布式处理节点获取对应的目标同步标识值子区间,基于所述目标同步标识值子区间从源数据库中获取目标增量数据,并将所述目标增量数据同步存储至所述目标数据库中。
3.根据权利要求2所述的方法,其特征在于,所述目标同步标识值子区间基于所述目标分布式处理节点对同步任务对应的同步标识值区间进行切割处理得到,所述同步标识值区间包括初始同步标识值和最大同步标识值。
4.根据权利要求3所述的方法,其特征在于,所述方法还包括:
获取每一所述目标分布式处理节点对应的同步任务执行状态;
若所有所述目标分布式处理节点对应的同步任务执行状态均为已完成,则获取本次同步任务对应的预选同步标识值;
将所述预选同步标识值作为本次同步任务对应的终止同步标识值,所述预选同步标识值表示本次同步任务对应的最大同步标识值;
将本次同步任务对应的终止同步标识值存储为下次同步任务对应的初始同步标识值。
5.根据权利要求1所述的方法,其特征在于,所述方法还包括:
获取所述目标分布式处理节点的异常执行状态信息,所述异常执行状态信息包括所述目标分布式处理节点在执行同步任务时中断通信的信息;
基于所述异常执行状态信息将所述目标分布式处理节点对应的同步任务标记为禁用同步任务;
基于所述禁用同步任务对应的同步任务信息确定替补节点信息,所述替补节点信息包括多个替补分布式处理节点以及每一所述替补分布式处理节点的节点名称;
将所述禁用同步任务重新标记为重启同步任务,并将所述替补节点信息发送至多个所述替补分布式处理节点,以使多个所述替补分布式处理节点执行所述重启同步任务。
6.一种数据同步方法,其特征在于,所述方法包括:
获取目标节点信息和同步任务信息,所述目标节点信息包括多个目标分布式处理节点以及每一所述目标分布式处理节点的节点名称,所述目标分布式处理节点表示执行同步任务的分布式处理节点;所述同步任务信息包括同步任务时间信息和同步任务配置信息;
基于所述目标节点信息和所述同步任务信息获取增量数据,并将所述增量数据同步存储至目标数据库中。
7.根据权利要求6所述的方法,其特征在于,所述获取目标节点信息和同步任务信息包括:
获取目标节点信息和本地节点名称,并判断所述本地节点名称是否在所述目标节点信息中;
若所述本地节点名称在所述目标节点信息中,则获取同步任务名称,并基于所述同步任务名称创建同步任务线程;
基于所述同步任务线程从所述处理器中获取所述同步任务时间信息,并基于所述同步任务时间信息和所述同步任务名称,从所述处理器中获取同步任务配置信息。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于杭州贝嘟科技有限公司,未经杭州贝嘟科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202011610559.8/1.html,转载请声明来源钻瓜专利网。
- 上一篇:射频MEMS开关器件及其制作方法
- 下一篇:一种头盔喷漆系统
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置