[发明专利]一种跨地域数据存储系统以及数据同步方法和装置有效
申请号: | 201711023750.0 | 申请日: | 2017-10-27 |
公开(公告)号: | CN107888666B | 公开(公告)日: | 2021-02-12 |
发明(设计)人: | 牟盖东 | 申请(专利权)人: | 北京奇艺世纪科技有限公司 |
主分类号: | H04L29/08 | 分类号: | H04L29/08 |
代理公司: | 北京润泽恒知识产权代理有限公司 11319 | 代理人: | 莎日娜 |
地址: | 100080 北京市海淀*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 地域 数据 存储系统 以及 同步 方法 装置 | ||
本发明实施例提供了一种跨地域数据存储系统以及数据同步方法和装置,该存储系统包括数据存储层和服务代理层,其中:数据存储层包括集群模式下的多个redis,多个redis分别布置在不同地域;服务代理层包括多个分别与redis匹配的数据分发代理,数据分发代理用于根据业务层的数据请求返回数据,还用于将业务层的待更新数据分别向与其对应的redis和其他redis分发。相对于目前利用couchbase进行数据存储并进行双向同步来说,由于redis本身所具有的较强的稳定性,在做跨地域存储时能够提供较为稳定的实时双向同步服务,从而避免了业务层的请求超时问题,使集群服务系统能够向用户提供较为稳定的服务。
技术领域
本发明涉及数据库技术领域,特别是涉及一种跨地域数据存储系统以及数据同步方法和装置。
背景技术
集群服务系统是由一些互相连接在一起的计算机构成的一个并行系统或分布式系统。这些计算机一起工作并运行一系列共同的应用程序,同时,为用户和应用程序提供单一的系统映射。从外部来看,它们仅仅是一个系统,对外提供统一的服务。集群服务系统内的计算机物理上通过电缆连接,程序上则通过集群软件连接,这些连接允许计算机使用故障应急与负载平衡功能,而故障应急与负载平衡功能在单机上是不可能实现的,因此能够为用户提供更稳定的服务。
目前在集群服务系统中,用来存储TB级别的数据的内存数据库一般选择couchbase,但是由于couchbase中对数据进行双向同步时效率较差,导致多地机房数据进行双向同步的时候业务层的请求大量超时,从而降低了集群服务系统的工作效率。
发明内容
有鉴于此,本发明提供了一种跨地域数据存储系统以及数据同步方法和装置,以解决业务层的请求超时的问题。
为了解决上述问题,本发明公开了一种跨地域数据存储系统,包括数据存储层和服务代理层,其中:
所述数据存储层包括集群模式下的多个redis,所述多个redis分别布置在不同地域;
所述服务代理层包括多个分别与所述redis对应的数据分发代理,所述数据分发代理用于根据业务层的数据请求返回数据,还用于将业务层发送的待更新数据分别向与其对应的redis和其他redis分发。
可选的,所述数据分发代理为cerberus代理。
可选的,所述redis用于通过同步方式接收所述待更新数据。
可选的,所述数据分发代理用于利用kafka消息队列向对应的redis和其他redis分发数据。
另外,本发明还提供了一种数据同步方法,应用于如上所述的跨地域数据存储系统的数据分发代理,所述数据同步方法包括:
响应业务层的数据请求,从对应的redis获取数据,并将获取的数据返回到所述业务层;
响应业务层的数据更新请求,将待更新数据分发到对应的redis和共处于同一数据存储层的其他redis。
可选的,所述将待更新数据分发到对应的redis和共处于同一数据存储层的其他redis,包括:
利用kafka消息队列将所述待更新数据向redis进行分发,所述redis用于利用同步方式接收所述待更新数据。
响应的,为了保证上述方法的实施,本发明还提供了一种数据同步装置,应用于如上所述的跨地域数据存储系统的数据分发代理,所述数据同步装置包括:
第一响应模块,用于响应业务层的数据请求,从对应的redis获取数据,并将获取的数据返回到所述业务层;
第二响应模块,用于响应业务层的数据更新请求,将待更新数据分发到对应的redis和共处于同一数据存储层的其他redis。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京奇艺世纪科技有限公司,未经北京奇艺世纪科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201711023750.0/2.html,转载请声明来源钻瓜专利网。
- 上一篇:一种自带散热装置的充电桩系统
- 下一篇:一种地表与管线沉降的观测方法
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置