[发明专利]一种分布式数据的存储方法、装置及系统有效
申请号: | 201410713367.8 | 申请日: | 2014-11-28 |
公开(公告)号: | CN104461779B | 公开(公告)日: | 2018-02-23 |
发明(设计)人: | 张森 | 申请(专利权)人: | 华为技术有限公司 |
主分类号: | G06F11/14 | 分类号: | G06F11/14;G06F3/06 |
代理公司: | 北京中博世达专利商标代理有限公司11274 | 代理人: | 申健 |
地址: | 518129 广东*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 分布式 数据 存储 方法 装置 系统 | ||
技术领域
本发明涉及数据存储技术领域,尤其涉及一种分布式数据的存储方法、装置及系统。
背景技术
内存数据网格(In-Memory Data Grid,IMDG),是分布式数据技术中的一种典型代表,它可以将数据存储到内存中,并使数据均衡分布到多个服务器上,具有良好的扩展性,因而被广泛应用于高性能、大规模、易扩展的分布式数据业务处理领域。
具体的,如图1所示,为IMDG数据服务的架构示意图,运营商在IaaS(Infrastructure as a Service,基础设施即服务)层部署IMDG软件以形成数据中心(Data Center,DC),并统一对PaaS(Platform as a Service,平台即服务)层不同租户的虚拟机提供IMDG数据的访问和存储服务。租户在发送虚拟机创建请求后,DC会根据虚拟机创建请求中该租户所在的物理地域位置优先在指定的本地DC内进行虚拟机的数据存取,当发生本地DC资源迁移等异常场景时,需要跨Internet(因特网)对租户的虚拟机进行跨DC的数据处理。
为了解决IMDG数据的跨DC处理问题,如图2所示,现有技术中通常在DC之间配置VPN(Virtual Private Network,虚拟专用网络)通道,从而将跨Internet连接的DC形成一个虚拟局域网,这样一来,IMDG数据可以在VPN通道内流通至其他DC。这样一来,所有DC内的IMDG数据会在所有服务器内均衡分布,因此,当DC1的租户需要调度DC1内的IMDG数据时,会出现近一半的IMDG数据访问操作都需要通过VPN通道进行跨DC通讯,降低了分布式IMDG数据的存储性能。
发明内容
本发明的实施例提供一种分布式数据的存储方法、装置及系统,将绝大部分数据读写操作限制在指定的DC内进行,避免频繁使用VPN通道进行跨DC数据通信,从而提升IMDG数据的存储性能。
为达到上述目的,本发明的实施例采用如下技术方案:
第一方面,本发明的实施例提供一种分布式数据的存储方法,所述方法应用于分布式数据存储系统中N个数据中心DC的任一个DC,N>1,所述方法包括:
第一DC获取本地用户发起的对第一文件的写操作指令,所述写操作指令至少包括第一文件的标识,所述第一DC为所述N个DC中的任一个;
若跨DC数据地址信息中不包括所述第一文件的标识,且所述第一DC中有存储所述第一文件的存储资源,所述第一DC则为所述第一文件在所述第一DC中分配存储地址,以便将所述第一文件写入所述第一DC中的存储地址;
若所述跨DC数据地址信息中不包括所述第一文件的标识,且所述第一DC没有存储所述第一文件的存储资源,所述第一DC则将所述第一文件的写操作指令发送给第二DC,以使得所述第二DC写入所述第一文件,并发送所述第一文件在所述第二DC内的存储地址至所述第一DC,所述第二DC为所述N个DC中除所述第一DC中的任一个;
所述第一DC将所述第一文件的标识和所述第一文件在所述第二DC的存储地址的对应关系保存至所述跨DC数据地址信息中;
其中,所述跨DC数据地址信息中保存有存储在所述第二DC中的本地用户文件的标识,及所述本地用户文件存储在所述第二DC中的存储地址的对应关系。
结合第一方面,在第一方面的第一种可能的实现方式中,在第一DC接收本地用户发起的对第一文件的写操作指令之后,还包括:
若所述跨DC数据地址信息中包括所述第一文件的标识,所述第一DC则在所述跨DC数据地址信息中查找所述第一文件在所述第二DC中的存储地址;
所述第一DC将所述第一文件的写操作指令和所述第一文件在所述第二DC中的存储地址发送至所述第二DC,以使得所述第二DC将所述第一文件写入所述第二DC中的存储地址。
结合第一方面或第一方面的第一种可能的实现方式,在第一方面的第二种可能的实现方式中,所述第一DC获取本地用户发起的对第一文件的写操作指令,包括:
所述第一DC查询发起所述第一文件的写操作指令的用户的信息;
若所述用户的信息符合预置的本地用户信息,所述第一DC则确定所述第一文件的写操作指令为本地用户发起的对第一文件的写操作指令。
结合第一方面或第一方面的第一至第二种可能的实现方式中的任一种可能的实现方式,在第一方面的第三种可能的实现方式中,所述方法还包括:
所述第一DC获取本地用户发起的对第一文件的读操作指令,所述读操作指令至少包括第一文件的标识;
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于华为技术有限公司,未经华为技术有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201410713367.8/2.html,转载请声明来源钻瓜专利网。
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置