[发明专利]基于大数据的集群数据同步方法、装置、设备及存储介质在审
申请号: | 201910873512.1 | 申请日: | 2019-09-17 |
公开(公告)号: | CN110795499A | 公开(公告)日: | 2020-02-14 |
发明(设计)人: | 饶刚 | 申请(专利权)人: | 中国平安人寿保险股份有限公司 |
主分类号: | G06F16/27 | 分类号: | G06F16/27;G06F16/22;G06F16/23;G06F16/182;G06F16/178 |
代理公司: | 44385 深圳市世联合知识产权代理有限公司 | 代理人: | 刘畅 |
地址: | 518000 广东省深圳市福田区益田路5033号*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | 本申请实施例公开了一种基于大数据的集群数据同步方法、装置、设备及存储介质,涉及数据处理技术领域。该方法包括:接收数据导入指令;响应于数据导入指令,获取第一集群中的待同步数据,对待同步数据执行数据转换,以将待同步数据转换为匹配第二集群中存储结构的待同步数据;建立多条并行通信线程和任务监控表,将转换后的待同步数据同步至第二集群中,并实时记录数据的同步状态。所述方法可以对于不在同一系统架构下的集群之间的数据实现数据同步,通过数据转换、设置并行线程以及任务监控表的方式提升了同步的效率和稳定性,并能对任务状态、数据丢失和同步异常等数据进行实时跟踪,获取同步时反馈的数据状态。 | ||
搜索关键词: | 同步数据 集群 任务监控 数据同步 数据转换 指令 数据处理技术 并行通信线 并行线程 存储结构 存储介质 接收数据 任务状态 实时跟踪 实时记录 数据丢失 数据实现 数据状态 同步状态 同一系统 大数据 同步的 转换 匹配 架构 反馈 响应 申请 | ||
【主权项】:
1.一种基于大数据的集群数据同步方法,其特征在于,包括:/n接收数据导入指令,所述数据导入指令用于将第一集群中的待同步数据同步至第二集群;/n响应于所述数据导入指令,获取所述第一集群中的待同步数据,对所述待同步数据执行数据转换,以将所述待同步数据转换为匹配所述第二集群中存储结构的待同步数据;/n建立多条并行通信线程和任务监控表,基于所述多条并行通信线程将转换后的所述待同步数据同步至所述第二集群中,并基于所述任务监控表实时记录数据的同步状态。/n
下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于中国平安人寿保险股份有限公司,未经中国平安人寿保险股份有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/patent/201910873512.1/,转载请声明来源钻瓜专利网。