[发明专利]数据同步方法以及相关设备、装置有效

专利信息
申请号: 202010079522.0 申请日: 2020-02-04
公开(公告)号: CN111352994B 公开(公告)日: 2023-04-18
发明(设计)人: 吕超;李海伟 申请(专利权)人: 浙江大华技术股份有限公司
主分类号: G06F16/27 分类号: G06F16/27
代理公司: 深圳市威世博知识产权代理事务所(普通合伙) 44280 代理人: 黎坚怡
地址: 310051 浙江*** 国省代码: 浙江;33
权利要求书: 查看更多 说明书: 查看更多
摘要:
搜索关键词: 数据 同步 方法 以及 相关 设备 装置
【权利要求书】:

1.一种数据同步方法,其特征在于,包括:

将待同步数据集分为多个子数据集;

依次选取所述多个子数据集中的一个作为当前子数据集;

将所述当前子数据集发送至数据库服务器进行数据处理,并获取所述当前子数据集中每一所述待同步数据的数据处理信息;

存储所述当前子数据集中每一所述待同步数据及其数据处理信息,并记录每一所述待同步数据及其数据处理信息的存储路径;其中,每一所述待同步数据对应于一个元数据,且所述待同步数据集预先经数据库服务器进行数据处理;

将所述待同步数据集中所述元数据相同的待同步数据的存储路径组包为数据同步消息,以使数据节点基于解析所述数据同步消息所获取的所述存储路径,得到待同步数据及其数据处理信息,并基于数据处理信息对待同步数据进行处理。

2.根据权利要求1所述的数据同步方法,其特征在于,

所述存储所述待同步数据集中每一所述待同步数据,并记录每一所述待同步数据的存储路径包括:

存储所述当前子数据集中每一所述待同步数据,并记录每一所述待同步数据的存储路径;

所述将所述待同步数据集中所述元数据相同的待同步数据的存储路径组包为数据同步消息包括:

将所述当前子数据集中所述元数据相同的待同步数据的存储路径组包为数据同步消息。

3.根据权利要求2所述的数据同步方法,其特征在于,所述将所述当前子数据集中所述元数据相同的待同步数据的存储路径组包为数据同步消息包括:

将所述当前子数据集中的待同步数据按照所述元数据进行分类;

将每一类中的待同步数据的存储路径组包为所述数据同步消息;

将所述数据同步消息存放至消息队列的目标分区中,其中,所述目标分区所属的主题与所述数据同步消息所对应的元数据一致,以使所述数据节点获取与其预先订阅的主题一致的数据同步消息。

4.根据权利要求1所述的数据同步方法,其特征在于,所述将所述待同步数据集中所述元数据相同的待同步数据的存储路径组包为数据同步消息之后,所述方法还包括:

将所述数据节点发送的数据版本查询请求转发至所述数据库服务器,并将所述数据库服务器发送的数据版本查询反馈转发至所述数据节点;

将所述数据节点发送的数据更新请求转发至所述数据库服务器,其中,所述数据更新请求是所述数据节点基于所述数据库服务器的当前数据版本与所述数据节点的本地数据版本不一致而发送的,所述当前数据版本是所述数据节点通过解析所述数据版本查询反馈而获得的;

获取所述数据库服务器基于所述数据更新请求而发送的待更新数据,以使所述数据节点接收到所述待更新数据之后进行数据更新。

5.一种数据同步方法,其特征在于,包括:

获取数据同步消息,其中,所述数据同步消息包括待同步数据集中元数据相同的待同步数据的存储路径,所述待同步数据集为预先经数据库服务器处理的数据;所述待同步数据集包括多个子数据集,所述多个子数据集中每一子数据集依次作为当前子数据集进行处理;

解析所述数据同步消息,获取所述当前子数据集中所述元数据相同的待同步数据的存储路径;

基于获取的存储路径,获取所述当前子数据集中所述元数据相同的待同步数据及其数据处理信息,其中,所述数据处理信息包括所述数据库服务器对所述待同步数据的处理信息,基于所述数据处理信息对对应的待同步数据进行数据同步。

6.根据权利要求5所述的数据同步方法,其特征在于,所述数据同步消息存放于消息队列的分区中,所述分区所属的主题与所述数据同步消息对应的元数据一致;

所述获取数据同步消息包括:

获取与预先订阅的主题一致的数据同步消息。

下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。

该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于浙江大华技术股份有限公司,未经浙江大华技术股份有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服

本文链接:http://www.vipzhuanli.com/pat/books/202010079522.0/1.html,转载请声明来源钻瓜专利网。

×

专利文献下载

说明:

1、专利原文基于中国国家知识产权局专利说明书;

2、支持发明专利 、实用新型专利、外观设计专利(升级中);

3、专利数据每周两次同步更新,支持Adobe PDF格式;

4、内容包括专利技术的结构示意图流程工艺图技术构造图

5、已全新升级为极速版,下载速度显著提升!欢迎使用!

请您登陆后,进行下载,点击【登陆】 【注册】

关于我们 寻求报道 投稿须知 广告合作 版权声明 网站地图 友情链接 企业标识 联系我们

钻瓜专利网在线咨询

周一至周五 9:00-18:00

咨询在线客服咨询在线客服
tel code back_top