[发明专利]多数据源数据同步方法在审
申请号: | 202111126584.3 | 申请日: | 2021-09-26 |
公开(公告)号: | CN113779038A | 公开(公告)日: | 2021-12-10 |
发明(设计)人: | 万千 | 申请(专利权)人: | 大健云仓科技(苏州)有限公司 |
主分类号: | G06F16/22 | 分类号: | G06F16/22;G06F16/2457;G06F16/2458;G06F16/27 |
代理公司: | 苏州隆恒知识产权代理事务所(普通合伙) 32366 | 代理人: | 计静静 |
地址: | 215000 江苏省苏州市工业园区*** | 国省代码: | 江苏;32 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 多数 数据 同步 方法 | ||
1.一种多数据源数据同步方法,其特征在于,所述方法应用于多数据源数据同步系统中,所述多数据源数据同步系统包括全球数据系统和设置在每个区域的区域数据系统,所述全球数据系统包括全球消息队列服务器、全球数据服务器和全球数据库,所述区域数据系统包括区域消息队列服务器、区域数据中心、主日志服务器、至少两个从日志服务器、数据服务服务器和中心数据库,所述方法包括:
通过所述主日志服务器定时从各个从日志服务器中获取信息,将获取到的信息打包成小区块,所述从日志服务器中的信息为监听器监听并归档的信息;
在各个区域中的小区块满足第一预设条件时,将各个小区块打包为大区块,并广播大区块的区块标识;所述第一预设条件包括所有区域的小区块已经过第一预设数量的区域数据中心认证,且在预设时间段内的各个小区块均存储在所述全球数据库中;
在大区块满足第二预设条件时,将所述大区块存储至所述全球数据库,所述第二预设条件包括所述大区块经过第二预设数量的区域数据中心认证。
2.根据权利要求1所述的多数据源数据同步方法,其特征在于,所述方法还包括:
所述监听器监听数据表的变化,并将监听到的变化广播至区域消息队列服务器;
从日志服务器消费所述区域消息队列服务器中的消息,并按时间段归档在本地。
3.根据权利要求2所述的多数据源数据同步方法,其特征在于,所述监听器以数据源产生时间为标准时间存储。
4.根据权利要求2所述的多数据源数据同步方法,其特征在于,所述方法还包括:
在所述主日志服务器与所述从日志服务器断开时,从所述至少两个从日志服务器中选择目标日志服务器,并将选择的所述目标日志服务器确定为新的主日志服务器,并在数据不完整时,重新进行数据归档。
5.根据权利要求4所述的多数据源数据同步方法,其特征在于,所述主日志服务器与所述从日志服务器通过心跳信息进行连接确认。
6.根据权利要求1所述的多数据源数据同步方法,其特征在于,所述方法还包括:
在所述主日志服务器打包小区块之后,判断小区块中的数据的完整性;
在数据完整时,所述主日志服务器同步所述小区块至各个从日志服务器,所述从日志服务器接收到同步数据之后,更新本地存储的数据;且所述主日志服务器在所述全球消息队列服务器中广播所述小区块的区块标识。
7.根据权利要求6所述的多数据源数据同步方法,其特征在于,所述方法还包括:在数据不完整时,重新从所述监听器中获取数据信息。
8.根据权利要求6所述的多数据源数据同步方法,其特征在于,所述方法还包括:
所述区域数据中心消费其他区域数据中心的广播信息,比对自身对应的小区块的区块标识,若一致,则签名后在所述全球消息队列服务器中广播。
9.根据权利要求6所述的多数据源数据同步方法,其特征在于,所述方法还包括:
若区域数据中心检测到所述小区块仅经过部分区域数据中心认证,则将所述小区块存储至所述区域数据库。
10.根据权利要求1至9任一所述的多数据源数据同步方法,其特征在于,所述方法还包括:
接收快照指令,所述快照指令用于请求生成预设时间点的数据快照;
在接收到所述快照指令之后,生成所述预设时间点的数据快照。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于大健云仓科技(苏州)有限公司,未经大健云仓科技(苏州)有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202111126584.3/1.html,转载请声明来源钻瓜专利网。
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置