[发明专利]一种基于分布式云存储系统的数据访问方法在审
申请号: | 202011276222.8 | 申请日: | 2020-11-16 |
公开(公告)号: | CN112491831A | 公开(公告)日: | 2021-03-12 |
发明(设计)人: | 樊馨 | 申请(专利权)人: | 樊馨 |
主分类号: | H04L29/06 | 分类号: | H04L29/06;H04L29/08 |
代理公司: | 北京化育知识产权代理有限公司 11833 | 代理人: | 尹均利 |
地址: | 518000 广东省深*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 基于 分布式 存储系统 数据 访问 方法 | ||
本申请公开了一种基于分布式云存储系统的数据访问方法,包括:云服务器获取多源异构数据,并将多源异构数据进行分层存储;生成多源异构数据的多个快照;在第N时刻,云服务器获取多源异构的读数据请求时,云服务器记录读请求压力值,并基于读请求压力值判断云服务器能否在预设时间内响应读请求;若是,则云服务器确定多个快照中的其中一个快照,并通过快照创建出一个或多个克隆,通过一个或多个克隆响应读请求;若否,则云服务器基于当前第N个时刻的读数据压力值、前N‑1个时刻的所有读数据压力值以及当前云服务的存储容量饱和度,计算出所需要增加的快照数目X,生成X个快照数目,通过X个快照创建出X*Y个克隆,基于X*Y个克隆响应读请求。
技术领域
本申请涉及数据处理技术领域,尤其涉及基于分布式云存储系统的数据访问方法。
背景技术
云存储是在云计算(cloud computing)概念上延伸和衍生发展出来的一个新的概念。云计算是分布式处理(Distributed Computing)、并行处理(Parallel Computing)和网格计算(Grid Computing)的发展,是透过网络将庞大的计算处理程序自动分拆成无数个较小的子程序,再交由多部服务器所组成的庞大系统经计算分析之后将处理结果回传给用户。通过云计算技术,网络服务提供者可以在数秒之内,处理数以千万计甚至亿计的信息,达到和”超级计算机”同样强大的网络服务。
云存储的概念与云计算类似,它是指通过集群应用、网格技术或分布式文件系统等功能,网络中大量各种不同类型的存储设备通过应用软件集合起来协同工作,共同对外提供数据存储和业务访问功能的一个系统,保证数据的安全性,并节约存储空间。云存储是将储存资源放到云上供人存取的一种新兴方案。使用者可以在任何时间、任何地方,透过任何可连网的装置连接到云上方便地存取数据。
在云存储领域,通常采用三副本冗余机制进行分布式存储,快照(snapshot)也是三副本存储,但是,热点内容的数据访问比较频繁,单位时间内访问快照(读请求)的数量激增,会导致响应缓慢,甚至出现卡死或宕机的风险。
发明内容
本申请实施例提供一种基于分布式云存储系统的数据访问方法,用于解决现有技术中对于分布式云存储系统中热点访问内容响应缓慢的问题。
本发明实施例提供一种基于分布式云存储系统的数据访问方法,包括:
云服务器获取多源异构数据,并将所述多源异构数据进行分层存储;
所述云服务器将所述分层存储的多源异构数据进行分层快照,生成所述多源异构数据的多个快照;
在第N时刻,所述云服务器获取所述多源异构的读数据请求时,所述云服务器记录所述读请求压力值,并基于所述读请求压力值判断所述云服务器能否在预设时间内响应所述读请求;
若是,则所述云服务器通过路由策略确定所述多个快照中的其中一个快照,并通过所述快照创建出一个或多个克隆,通过所述一个或多个克隆响应所述读请求;
若否,则所述云服务器基于当前第N个时刻的读数据压力值、前N-1个时刻的所有读数据压力值以及当前所述云服务的存储容量饱和度,计算出所需要增加的快照数目X,并依次生成X个所述快照数目,通过所述X个快照创建出X*Y个克隆,基于所述X*Y个克隆响应所述读请求。
可选地,所述云服务器基于当前第N个时刻的读数据压力值、前N-1个时刻的所有读数据压力值以及当前所述云服务的存储容量饱和度,计算出所需要增加的快照数目X,包括:
所述云服务器基于公式:计算所述快照数目X,其中a、b和c为校正因子,θ为存储容量饱和度,P为读数据压力均值,Pn为第n个周期内所述云服务器的读压力值,λn为权重,Xmax为所述云服务器能够增加的快照的最大数目。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于樊馨,未经樊馨许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202011276222.8/2.html,转载请声明来源钻瓜专利网。
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置