[发明专利]数据的同步方法及装置有效
申请号: | 201710780752.8 | 申请日: | 2017-09-01 |
公开(公告)号: | CN107404540B | 公开(公告)日: | 2021-06-18 |
发明(设计)人: | 韦祎;闫绍华;李振博 | 申请(专利权)人: | 北京奇虎科技有限公司 |
主分类号: | H04L29/08 | 分类号: | H04L29/08 |
代理公司: | 北京律诚同业知识产权代理有限公司 11006 | 代理人: | 王玉双 |
地址: | 100088 北京市西城区新*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 数据 同步 方法 装置 | ||
本发明公开了一种数据的同步方法及装置,涉及一种数据处理技术领域,主要目的在于解决现有跨机房之间数据的不同步的问题。主要技术方案包括:监控分布于不同机房中数据库的数据更新情况;若根据所述数据更新情况将所述数据库划分为第一数据库与第二数据库时,则根据预设的业务类型判断是否通过所述第二数据库对所述第一数据库进行数据同步,所述第一数据库为相对于所述第二数据库数据更新滞后的数据库;若通过所述第二数据库对所述第一数据库进行数据同步,则向所述第二数据库发送数据同步请求,以便从所述第二数据库中获取待同步的数据。主要用于数据的同步。
技术领域
本发明涉及一种数据处理技术领域,特别是涉及一种数据的同步方法及装置。
背景技术
数据同步是指为了保证在进行相同业务处理时,数据的一致性与完整性,在不同的终端设备或者存储介质中进行数据共享并使数据更新一致的过程。其中,在处理千亿级别的数据量时,需要多个可以容纳大存储量设备的机房,每个机房都需要配置服务器,以便保证数据处理的同步性。
目前,在客户端发送数据查询请求后,可以从任意一个机房中的服务器进行接收,并从对应的存储器中查询数据,但是由于网络延迟、数据传输失败等原因,每个机房中可能出现存储的数据不一致的情况,这就使得服务器在进行数据查询时,出现数据差异,例如,客户端发送查询短信的安全等级请求后,经过负载均衡后,请求会发送至某个机房的服务器中,经过服务器会对当前机房中的数据库中短信的安全等级进行查询,若数据库因为网络问题或数据丢失等原因,查询不到最新的安全等级,而跨机房之间数据的不同步会导致业务处理结果存在差异,降低业务处理的准确性。
发明内容
有鉴于此,本发明提供一种数据的同步方法及装置,主要目的在于解决现有跨机房之间数据的不同步的问题。
依据本发明一个方面,提供了一种数据的同步方法,包括:
监控分布于不同机房中数据库的数据更新情况;
若根据所述数据更新情况将所述数据库划分为第一数据库与第二数据库时,则根据预设的业务类型判断是否通过所述第二数据库对所述第一数据库进行数据同步,所述第一数据库为相对于所述第二数据库数据更新滞后的数据库;
若通过所述第二数据库对所述第一数据库进行数据同步,则向所述第二数据库发送数据同步请求,以便从所述第二数据库中获取待同步的数据。
进一步地,所述监控分布于不同机房中数据库的数据更新情况包括:
检测分布于不同机房中数据库的运行状态,所述数据库的运行状态包括数据库的网络环境及数据库的挂起情况;
将根据检测的运行状态将非正常存储数据的数据库确定为第一数据库,将正常存储数据的数据库确定为第二数据库。
进一步地,所述按照预设时间间隔检测检测所述数据库的运行状态之前,所述方法还包括:
按照预设时间间隔检测不同数据库对应的消息队列的消费状态,所述消息队列的消费状态包括消费的网络环境及消费参数设定情况;
若存在非正常消费,将非正常消费的消息队列对应的数据库确认为第一数据库,正常消费的消息队列对应的数据库确认为第二数据库,若不存在非正常消费,则执行检测分布于不同机房中数据库的运行状态的步骤。
进一步地,所述若通过第二数据库库进行数据同步,则向所述第二数据库发送数据同步请求包括:
若通过第二数据库库进行数据同步,则选取所述第二数据库中处于预设网络环境下进行数据更新的数据库,并向所述数据库发送数据同步请求。
进一步地,所述根据预设的业务类型判断是否通过所述第二数据库对所述第一数据库进行数据同步之后,所述方法还包括:
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京奇虎科技有限公司,未经北京奇虎科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201710780752.8/2.html,转载请声明来源钻瓜专利网。
- 上一篇:音乐推送方法及终端设备
- 下一篇:一种对等网络传输邻居节点选择的方法及系统
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置