[发明专利]云平台连续数据同步方法及其装置有效
申请号: | 201611167491.4 | 申请日: | 2016-12-16 |
公开(公告)号: | CN106603665B | 公开(公告)日: | 2018-04-13 |
发明(设计)人: | 许广彬;郑军;张银滨;刘继江;殳鑫鑫;李忠文 | 申请(专利权)人: | 无锡华云数据技术服务有限公司 |
主分类号: | H04L29/08 | 分类号: | H04L29/08 |
代理公司: | 北京商专永信知识产权代理事务所(普通合伙)11400 | 代理人: | 高之波,储振 |
地址: | 214125 江*** | 国省代码: | 江苏;32 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 平台 连续 数据 同步 方法 及其 装置 | ||
技术领域
本发明涉及云计算技术领域,尤其涉及一种云平台连续数据同步方法及其装置。
背景技术
在云计算领域,对虚拟机磁盘执行数据保护时一般采用快照技术。用户可以选择定期或者不定期地对系统盘和数据盘做快照(snapshot)。快照技术可以将事故发生后的数据损失降低到一定范围内,比如,允许用户创建的快照个数。但是,快照技术只能将数据恢复至最近的一个快照点的状态,这个快照点之后产生的数据便无法恢复。快照技术虽然可以恢复到过去的某个快照点,但是当本地数据中心发生故障时,保存在本地数据中心的快照也无法使用,从而导致虚拟机磁盘数据无法保证一致性。
此外,在云计算领域中对虚拟机磁盘数据进行保护还可采用异地备份的技术方案。异地备份的实现方式有两种,一种是异地快照备份,即定期或者不定期地将本地数据中心的快照复制到另外一个数据中心,当本地数据中心发生故障时,可以在异地数据中心将数据恢复至最近的一个快照点;另外一种是通过镜像的方式,在另外一个数据中心存放相同的数据。前者的缺点是数据只能恢复至最近的一个异地快照点;而后者的缺点是一旦源数据中心写入了错误的数据,异地数据中心也会存放错误的数据。
随着企业对数据处理依赖程度的递增,少量数据的丢失会造成大量的经济损失。传统的数据备份和恢复一直采用周期性的备份和快照来实现。传统的备份方式和快照只能完成到固定时间点的数据恢复,两次备份之间的数据更新无法保护。随着数据量的增大,传统的备份方式和快照的RPO(Recovery Point Objective,数据恢复点目标)和RTO(Recovery Time Objective,恢复时间目标)就显得过长,这对于一些对数据依赖性很高的信息系统是无法接受的。这类系统通常要求一天24小时不间断地运行,短时间的中断服务或者少量的数据丢失都可能带来巨大的业务损失。
在基于云存储技术的实际应用中,通常都使用集群技术,将两台或多台计算机节点构成一种松散耦合的计算节点集合,为用户提供了更高效的容错和故障恢复能力,增加了对海量任务的实时处理能力,从而提供了更好的可靠性和实用性。
对于云平台中连续数据保护通常采用异步方式或者同步方式实现。
在异步方式中,数据请求从客户端发送过来之后,先将数据写入到本地集群和内存当中,然后返回给客户端一个应答,表示该数据请求已经完成,客户端可以发送后续的读写请求,当内存区域的数据达到一定的阈值,例如内存数据达到预先设定的大小或者达到一定时间的阈值,系统会启动一个额外的线程异步将内存数据复制到远端的数据集群当中,保证这部分本地集群和远端集群数据的一致性,该方案还有一些简单的变化,但是本质还是异步复制数据到远端集群达到数据保护的目的。异步方案的连续数据保护存在本地集群和远端集群数据不同步情况,在本地集群因为某种原因需要通过远端集群恢复数据的时候,可能存在不能恢复到最新的数据,在数据已经写到本地集群和内存中,但是数据还没有异步复制远端集群中,这个时候如果客户端所在物理节点因为某种原因导致内存数据丢失,这个时候数据可能就恢复不到最新的版本。
同步方案针对异步方案存在本地集群和远端集群存在数据不同步的问题,同步方案采取数据请求同时发给本地集群和远端集群,只有本地集群和远端集群保证数据请求的数据已经持久化到本地集群和远端集群,客户端只有收到本地集群和远端集群的应答才会认为本次数据请求已经完成,客户端可以发送后续请求。
发明内容
本发明的目的在于公开一种云平台连续数据同步方法及其基于该方法的一种云平台连续数据同步装置,克服异步连续数据保护方式在本地集群和远端集群之间由于不同步所造成的数据丢失的缺陷;同时,克服同步连续数据保护方式中需要等待数据在本地集群和远端集群持久化的问题,避免在同步方式中云平台的计算性能的下降。
为实现上述发明目的,本发明提供了一种云平台连续数据同步方法,客户端接收自数据发生装置发送的请求,将请求并行发送至本地存储装置与异地存储装置;客户端不等待该请求所关联的数据在本地存储装置和/或异地存储装置中完成数据持久化,而等待未作出响应的本地存储装置或者异地存储装置作出响应,任务结束。
作为本发明的进一步改进,客户端不等待该请求所关联的数据在本地存储装置和/或异地存储装置中完成数据持久化,而等待未作出响应的本地存储装置或者异地存储装置作出响应,并允许本地存储装置与异地存储装置之间相差至少一个所述自客户端接收的请求所对应的延迟操作周期。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于无锡华云数据技术服务有限公司,未经无锡华云数据技术服务有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201611167491.4/2.html,转载请声明来源钻瓜专利网。
- 上一篇:车辆钥匙系统
- 下一篇:一种隧道远程在线遥测系统构架方式
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置