[发明专利]数据同步方法、装置及系统在审
申请号: | 201410797462.0 | 申请日: | 2014-12-18 |
公开(公告)号: | CN104462483A | 公开(公告)日: | 2015-03-25 |
发明(设计)人: | 杨艳杰 | 申请(专利权)人: | 北京奇虎科技有限公司;奇智软件(北京)有限公司 |
主分类号: | G06F17/30 | 分类号: | G06F17/30 |
代理公司: | 北京智汇东方知识产权代理事务所(普通合伙) 11391 | 代理人: | 康正德;孙晓芳 |
地址: | 100088 北京市西城区新*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 数据 同步 方法 装置 系统 | ||
技术领域
本发明涉及计算机技术领域,特别是一种数据同步方法、装置及系统。
背景技术
Mongodb,分布式文档存储数据库,由C++语言编写,旨在为万维网(WEB)应用提供可扩展的高性能数据存储解决方案。Mongodb是一个高性能,开源,无模式的文档型数据库,是当前非关系型数据库中比较热门的一种。它在许多场景下可用于替代传统的关系型数据库或键/值存储方式。
Mongodb本身仅允许在一个集群中容纳7个节点,各节点接收外界数据的请求,如增、删、改、查请求,进而根据请求内容计算数据及其副本在集群中所分布的节点,负责请求的分发与应答的汇总。随着业务量的逐渐增大,出现了7个节点无法承担现有请求量的问题。
发明内容
鉴于上述问题,提出了本发明以便提供一种克服上述问题或者至少部分地解决上述问题的数据同步方法、装置及系统。
依据本发明的一个方面,提供了一种数据同步方法,用于将第一数据库集群中的数据同步到第二数据库集群,所述第一数据库集群与所述第二数据库集群相互独立,所述方法包括:监控所述第一数据库集群的数据写入操作;当监控到存在数据被写入所述第一数据库集群时,读取写入的所述数据;以及将所述数据写入所述第二数据库集群。
可选地,所述第一数据库集群包括主数据库与至少一从数据库,以及所述监控所述第一数据库集群的数据写入操作的步骤进一步包括:实时监控所述第一数据库集群中的主数据库的数据写入操作。
可选地,所述实时监控所述第一数据库集群中的主数据库的数据写入操作的步骤进一步包括:实时监控所述主数据库的oplog日志文件中表示写入操作的参数是否被赋值,若是,则确定存在数据被写入所述第一数据库集群。
可选地,所述第一数据库集群包括主数据库与至少一从数据库,以及所述监控所述第一数据库集群的数据写入操作的步骤进一步包括:实时监控所述第一数据库集群中的至少一从数据库的数据写入操作。
可选地,所述实时监控所述第一数据库集群中的至少一从数据库的数据写入操作的步骤进一步包括:实时监控所述至少一从数据库的oplog日志文件中表示写入操作的参数是否被赋值,若是,则确定存在数据被写入所述第一数据库集群。
可选地,所述第二数据库集群包括主数据库与至少一从数据库,以及所述将所述数据写入第二数据库集群的步骤进一步包括:将所述数据写入所述第二数据库集群的所述主数据库。
可选地,将所述数据写入所述第二数据库集群的所述主数据库之后,还包括:将所述数据从所述第二数据库集群的所述主数据库同步至所述第二数据库集群的所述至少一从数据库。
可选地,所述第一数据库集群与所述第二数据库集群为Mongodb集群。
可选地,所述读取写入的所述数据,包括:通过Mongodb接口读取写入的所述数据。
依据本发明的另一个方面,还提供了一种数据同步装置,用于将第一数据库集群中的数据同步到第二数据库集群,所述第一数据库集群与所述第二数据库集群相互独立,所述数据同步装置包括:
监控器,适于监控所述第一数据库集群的数据写入操作;
读取器,适于当监控到存在数据被写入所述第一数据库集群时,读取写入的所述数据;以及
写入器,适于将所述数据写入所述第二数据库集群。
可选地,所述第一数据库集群包括主数据库与至少一从数据库,所述监控器还适于:实时监控所述第一数据库集群中的主数据库的数据写入操作。
可选地,所述监控器还适于:实时监控所述主数据库的oplog日志文件中表示写入操作的参数是否被赋值,若是,则确定存在数据被写入所述主第一数据库集群。
可选地,所述第一数据库集群包括主数据库与至少一从数据库,所述监控器还适于:实时监控所述第一数据库集群中的至少一从数据库的数据写入操作。
可选地,所述监控器还适于:实时监控所述至少一从数据库的oplog日志文件中表示写入操作的参数是否被赋值,若是,则确定存在数据被写入所述第一数据库集群。
可选地,所述第二数据库集群包括主数据库与至少一从数据库,所述写入器还适于:将所述数据写入所述第二数据库集群的所述主数据库。
可选地,所述装置还包括:
同步器,适于所述写入器将所述数据写入所述第二数据库集群的所述主数据库之后,将所述数据从所述第二数据库集群的所述主数据库同步至所述第二数据库集群的所述至少一从数据库。
可选地,所述第一数据库集群与所述第二数据库集群为Mongodb集群。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京奇虎科技有限公司;奇智软件(北京)有限公司,未经北京奇虎科技有限公司;奇智软件(北京)有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201410797462.0/2.html,转载请声明来源钻瓜专利网。
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置