[发明专利]数据一致性同步方法、装置及计算机可读存储介质有效
申请号: | 201910699373.5 | 申请日: | 2019-07-29 |
公开(公告)号: | CN110442647B | 公开(公告)日: | 2022-01-28 |
发明(设计)人: | 梁慷凯;熊一龙;戴秀凤 | 申请(专利权)人: | 招商局金融科技有限公司 |
主分类号: | G06F16/27 | 分类号: | G06F16/27;G06F16/215 |
代理公司: | 深圳市沃德知识产权代理事务所(普通合伙) 44347 | 代理人: | 高杰;于志光 |
地址: | 518000 广东省深圳市福田区华富街*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | 本发明涉及一种大数据技术,揭露了一种数据一致性同步方法,包括:获取用户的实时数据集和离线数据集,分别对所述实时数据集和离线数据集进行数据清洗,得到初始实时数据集和初始离线数据集;通过调度器对所述初始实时数据集进行实时更新,得到目标实时数据集,并将所述目标实时数据集存入数据库中;利用预先构建的调度系统对所述初始离线数据集进行分析汇总处理后得到目标离线数据集,并将所述目标离线数据集存入云存储数据库中;将所述目标离线数据集从所述云存储数据库中导入至所述数据库中,完成所述实时数据集和离线数据集的一致性同步。本发明还提出一种数据一致性同步装置以及一种计算机可读存储介质。本发明实现了数据一致性同步。 | ||
搜索关键词: | 数据一致性 同步 方法 装置 计算机 可读 存储 介质 | ||
【主权项】:
1.一种数据一致性同步方法,其特征在于,所述方法包括:获取用户的实时数据集和离线数据集,分别对所述实时数据集和离线数据集进行数据清洗,得到初始实时数据集和初始离线数据集;通过调度器对所述初始实时数据集进行实时更新,得到目标实时数据集,并将所述目标实时数据集存入数据库中;利用预先构建的调度系统对所述初始离线数据集进行分析汇总处理后得到目标离线数据集,并将所述目标离线数据集存入云存储数据库中;将所述目标离线数据集从所述云存储数据库中导入至所述数据库中,完成所述实时数据集和离线数据集的一致性同步。
下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于招商局金融科技有限公司,未经招商局金融科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/patent/201910699373.5/,转载请声明来源钻瓜专利网。