[发明专利]数据的同步方法及装置有效

专利信息
申请号: 201710780752.8 申请日: 2017-09-01
公开(公告)号: CN107404540B 公开(公告)日: 2021-06-18
发明(设计)人: 韦祎;闫绍华;李振博 申请(专利权)人: 北京奇虎科技有限公司
主分类号: H04L29/08 分类号: H04L29/08
代理公司: 北京律诚同业知识产权代理有限公司 11006 代理人: 王玉双
地址: 100088 北京市西城区新*** 国省代码: 北京;11
权利要求书: 查看更多 说明书: 查看更多
摘要:
搜索关键词: 数据 同步 方法 装置
【说明书】:

发明公开了一种数据的同步方法及装置,涉及一种数据处理技术领域,主要目的在于解决现有跨机房之间数据的不同步的问题。主要技术方案包括:监控分布于不同机房中数据库的数据更新情况;若根据所述数据更新情况将所述数据库划分为第一数据库与第二数据库时,则根据预设的业务类型判断是否通过所述第二数据库对所述第一数据库进行数据同步,所述第一数据库为相对于所述第二数据库数据更新滞后的数据库;若通过所述第二数据库对所述第一数据库进行数据同步,则向所述第二数据库发送数据同步请求,以便从所述第二数据库中获取待同步的数据。主要用于数据的同步。

技术领域

本发明涉及一种数据处理技术领域,特别是涉及一种数据的同步方法及装置。

背景技术

数据同步是指为了保证在进行相同业务处理时,数据的一致性与完整性,在不同的终端设备或者存储介质中进行数据共享并使数据更新一致的过程。其中,在处理千亿级别的数据量时,需要多个可以容纳大存储量设备的机房,每个机房都需要配置服务器,以便保证数据处理的同步性。

目前,在客户端发送数据查询请求后,可以从任意一个机房中的服务器进行接收,并从对应的存储器中查询数据,但是由于网络延迟、数据传输失败等原因,每个机房中可能出现存储的数据不一致的情况,这就使得服务器在进行数据查询时,出现数据差异,例如,客户端发送查询短信的安全等级请求后,经过负载均衡后,请求会发送至某个机房的服务器中,经过服务器会对当前机房中的数据库中短信的安全等级进行查询,若数据库因为网络问题或数据丢失等原因,查询不到最新的安全等级,而跨机房之间数据的不同步会导致业务处理结果存在差异,降低业务处理的准确性。

发明内容

有鉴于此,本发明提供一种数据的同步方法及装置,主要目的在于解决现有跨机房之间数据的不同步的问题。

依据本发明一个方面,提供了一种数据的同步方法,包括:

监控分布于不同机房中数据库的数据更新情况;

若根据所述数据更新情况将所述数据库划分为第一数据库与第二数据库时,则根据预设的业务类型判断是否通过所述第二数据库对所述第一数据库进行数据同步,所述第一数据库为相对于所述第二数据库数据更新滞后的数据库;

若通过所述第二数据库对所述第一数据库进行数据同步,则向所述第二数据库发送数据同步请求,以便从所述第二数据库中获取待同步的数据。

进一步地,所述监控分布于不同机房中数据库的数据更新情况包括:

检测分布于不同机房中数据库的运行状态,所述数据库的运行状态包括数据库的网络环境及数据库的挂起情况;

将根据检测的运行状态将非正常存储数据的数据库确定为第一数据库,将正常存储数据的数据库确定为第二数据库。

进一步地,所述按照预设时间间隔检测检测所述数据库的运行状态之前,所述方法还包括:

按照预设时间间隔检测不同数据库对应的消息队列的消费状态,所述消息队列的消费状态包括消费的网络环境及消费参数设定情况;

若存在非正常消费,将非正常消费的消息队列对应的数据库确认为第一数据库,正常消费的消息队列对应的数据库确认为第二数据库,若不存在非正常消费,则执行检测分布于不同机房中数据库的运行状态的步骤。

进一步地,所述若通过第二数据库库进行数据同步,则向所述第二数据库发送数据同步请求包括:

若通过第二数据库库进行数据同步,则选取所述第二数据库中处于预设网络环境下进行数据更新的数据库,并向所述数据库发送数据同步请求。

进一步地,所述根据预设的业务类型判断是否通过所述第二数据库对所述第一数据库进行数据同步之后,所述方法还包括:

下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。

该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京奇虎科技有限公司,未经北京奇虎科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服

本文链接:http://www.vipzhuanli.com/pat/books/201710780752.8/2.html,转载请声明来源钻瓜专利网。

×

专利文献下载

说明:

1、专利原文基于中国国家知识产权局专利说明书;

2、支持发明专利 、实用新型专利、外观设计专利(升级中);

3、专利数据每周两次同步更新,支持Adobe PDF格式;

4、内容包括专利技术的结构示意图流程工艺图技术构造图

5、已全新升级为极速版,下载速度显著提升!欢迎使用!

请您登陆后,进行下载,点击【登陆】 【注册】

关于我们 寻求报道 投稿须知 广告合作 版权声明 网站地图 友情链接 企业标识 联系我们

钻瓜专利网在线咨询

周一至周五 9:00-18:00

咨询在线客服咨询在线客服
tel code back_top