[发明专利]双控构架分布式存储系统、数据读取方法、装置和存储介质在审
申请号: | 201910418969.3 | 申请日: | 2019-05-20 |
公开(公告)号: | CN110286852A | 公开(公告)日: | 2019-09-27 |
发明(设计)人: | 王新;王欣 | 申请(专利权)人: | 平安科技(深圳)有限公司 |
主分类号: | G06F3/06 | 分类号: | G06F3/06;G06F11/20 |
代理公司: | 深圳市沃德知识产权代理事务所(普通合伙) 44347 | 代理人: | 高杰;于志光 |
地址: | 518000 广东省深圳市福田区福*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 双控 服务器 分布式存储系统 构架 备用服务器 分布式存储 存储介质 数据读取 集群资源管理 服务器故障 虚拟IP地址 主用服务器 存储节点 待机状态 动态配置 节点数据 虚拟节点 复制 配备 概率 恢复 | ||
本发明涉及一种分布式存储技术,公开了一种双控构架分布式存储系统、数据读取方法、装置和存储介质。本发明通过在每个分布式存储节点进行双控构架的设计,即配备两台服务器,分别为主用服务器和备用服务器。两个服务器采用A/P(Active/Passive)模式,主用服务器处于工作状态,备用服务器处于待机状态。通过集群资源管理器动态配置同一个虚拟IP地址,即两台服务器对整个ceph系统呈现为同一个虚拟节点。相较于现有技术,本发明采用了存储节点双控设计,在仅有服务器故障的情况下避免复制大量数据,降低ceph系统进行节点数据恢复的概率。
技术领域
本发明涉及分布式存储技术领域、特别涉及一种双控架构分布式存储系统、电子装置、数据读取方法、装置和计算机可读存储介质。
背景技术
CEPH分布式文件系统是一种容量大、性能高、可靠性强的分布式存储系统。现有的CEPH分布式系统里面,设置有有多个存储节点并且可实现数据的多副本存储。采用这种分布式结构的系统中,当一台存储节点中的服务器(主机)坏掉的时候,该服务器中存储的数据也同时不可访问。这个时候ceph系统需要恢复这个服务器上的相关数据,才能进行访问。恢复一台服务器上的数据需要相当长的时间,会对集群性能产生影响。特别是随着现在硬盘的容量增加,单盘通常可具有6T或者8T的存储容量,因而一个服务器上存储的数据可能有好几十T,巨大数据量使得上述对系统的的影响更加明显。
当实际上当一台服务器故障时,很多时候这个服务器上面的存储(磁盘)实际并没有损坏,磁盘上的数据依然是有效的,因此单纯的复制数据其实是比较无效的工作,如何避免复制大量数据又能使得系统能够正常工作成为一个亟待解决的问题。
发明内容
本发明的主要目的是提供一种双控架构分布式存储系统、电子装置、数据读取方法、装置和计算机可读存储介质,旨在通过存储节点双控设计,在仅有服务器故障的情况下避免复制大量数据,降低ceph系统进行节点数据恢复的概率。
为实现上述目的,本发明提出的一种电子装置,所述电子装置分别与分布式系统中多个分布式节点的主用服务器和备用服务器通信连接,同一分布式节点中的主用服务器和备用服务器之间通过网络连接,各个分布式节点中的主用服务器分别处于工作状态,各个分布式节点中的备用服务器分别处于待机状态,各个分布式节点分别对应一个共享磁盘,同一分布式节点中的主用服务器和备用服务器分别与所在分布式节点对应的同一共享磁盘通信连接,所述电子装置包括存储器和处理器,所述存储器上存储有数据读取程序,所述数据读取程序被所述处理器执行时实现如下步骤:
初始访问步骤:实时,或者,定时,或者,在收到从一分布式节点的主用服务器读取数据的指令后,访问该分布式节点中当前处于工作状态的主用服务器,以读取对应的共享磁盘上的数据;
状态转换步骤:若该分布式节点中的所述主用服务器出现故障无法访问,则将该分布式节点中当前处于待机状态的备用服务器切换至工作状态;
数据读取步骤:在该分布式节点中的所述备用服务器成功切换至工作状态后,访问该分布式节点中的所述备用服务器,以读取对应的共享磁盘上的数据。
优选地,所述的电子装置中,还与所述分布式系统中的监控单元通信连接,所述数据读取程序被所述处理器执行时还实现如下步骤:
写入检测步骤:若该分布式节点中的所述主用服务器出现故障无法访问,则通过所述监控单元检测是否有数据正在通过该分布式节点中的所述主用服务器写入对应的共享磁盘;
同步数据步骤:若有数据正在通过该分布式节点中的所述主用服务器写入对应的共享磁盘,则在该分布式节点中的所述备用服务器成功切换至工作状态后,将所述待写入的数据通过该分布式节点中的所述备用服务器写入对应的共享磁盘。
优选地,所述的电子装置中,该分布式节点中的主用服务器和备用服务器动态配置同一虚拟地址,所述数据读取程序被所述处理器执行时还实现如下步骤:
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于平安科技(深圳)有限公司,未经平安科技(深圳)有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201910418969.3/2.html,转载请声明来源钻瓜专利网。