[发明专利]一种跨机房数据同步方法和装置在审
申请号: | 201811420567.9 | 申请日: | 2018-11-26 |
公开(公告)号: | CN109714392A | 公开(公告)日: | 2019-05-03 |
发明(设计)人: | 刘先攀;刘宝国;吴连朋;张宏波;夏章抓 | 申请(专利权)人: | 聚好看科技股份有限公司 |
主分类号: | H04L29/08 | 分类号: | H04L29/08;H04L1/16 |
代理公司: | 北京润泽恒知识产权代理有限公司 11319 | 代理人: | 莎日娜 |
地址: | 266061 山*** | 国省代码: | 山东;37 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 机房 数据消息 第一数据 数据同步 校验 方法和装置 失败消息 同步数据 发布数据消息 生成数据 数据校验 通信连接 一次接收 匹配 返回 发布 应用 | ||
本发明实施例提供了一种跨机房数据同步方法和装置,应用于目标机房,所述目标机房与源机房通信连接,所述源机房用于向所述目标机房发布数据消息,所述数据消息包括当前数据编号和下一数据编号,所述方法包括:接收所述源机房发布的第一数据消息;获取前一次接收的第二数据消息的下一数据编号;判断所述第一数据消息的当前数据编号是否与所述第二数据消息的下一数据编号匹配;若所述第一数据消息的当前数据编号大于所述第二数据消息的下一数据编号,则生成数据校验失败消息;将所述数据校验失败消息返回至所述源机房。通过对同步数据进行校验,从而能够及时校验接收的同步数据是否异常,提高跨机房数据同步的可靠性。
技术领域
本发明涉及数据处理技术领域,特别是涉及一种跨机房数据同步方法和一种跨机房数据同步装置。
背景技术
目前,针对一些大型网站业务,在系统可用性上往往会考虑数据库的跨机房镜像复制,容灾备份等,在发生不可抗力因素导致当地数据不可用时,能够快速的通过异步的数据库备份或者镜像提供系统访问。
Mysql、Oracle等数据库的主从复制对网络要求比较高,一般只适用在同一个机房内。跨机房数据库的数据同步系统中一般是采用解析日志的方式进行数据同步,源机房通过解析Binlog更新日志文件将变更数据进行解析组装,然后将变更数据发送到目的机房,目的机房的解析模块收到变更数据进行处理后,将变更数据写到目的机房数据库。
跨机房进行数据同步时,由于是跨机房数据传输,网络不稳定,机房间数据传输会存在一定的丢包,也有可能收到多次重复数据包,最终导致接收端接收到的数据异常。
发明内容
鉴于上述问题,提出了本发明实施例以便提供一种克服上述问题或者至少部分地解决上述问题的一种跨机房数据同步方法和相应的一种跨机房数据同步装置。
为了解决上述问题,本发明实施例公开了一种跨机房数据同步方法,应用于目标机房,所述目标机房与源机房通信连接,所述源机房用于向所述目标机房发布数据消息,所述数据消息包括当前数据编号和下一数据编号,所述方法包括:
接收所述源机房发布的第一数据消息;
获取前一次接收的第二数据消息的下一数据编号;
判断所述第一数据消息的当前数据编号是否与所述第二数据消息的下一数据编号匹配;
若所述第一数据消息的当前数据编号大于所述第二数据消息的下一数据编号,则生成数据校验失败消息;
将所述数据校验失败消息返回至所述源机房。
可选的,所述接收所述源机房发布的第一数据消息,包括:
接收所述源机房发布的针对预设消息主题的第一数据消息。
可选的,所述获取前一次接收的第二数据消息的下一数据编号,包括:
获取前一次接收的针对所述预设消息主题的第二数据消息;
提取所述第二数据消息的下一数据编号。
可选的,所述生成数据校验失败消息,包括:
将所述第二数据消息的下一数据编号作为当前数据编号;
根据所述当前数据编号,生成所述数据校验失败消息。
可选的,所述方法还包括:
若所述第一数据消息的当前数据编号小于所述第二数据消息的下一数据编号,则丢弃所述第一数据消息的第一数据。
本发明实施例还公开了一种跨机房数据同步装置,其特征在于,应用于目标机房,所述目标机房与源机房通信连接,所述源机房用于向所述目标机房发布数据消息,所述数据消息包括当前数据编号和下一数据编号,所述装置包括:
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于聚好看科技股份有限公司,未经聚好看科技股份有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201811420567.9/2.html,转载请声明来源钻瓜专利网。
- 上一篇:分布式消息分发系统
- 下一篇:一种应用程序推荐的方法及装置