[发明专利]一种数据写命令处理方法、装置、电子设备及存储介质在审
申请号: | 201911193363.0 | 申请日: | 2019-11-28 |
公开(公告)号: | CN110908613A | 公开(公告)日: | 2020-03-24 |
发明(设计)人: | 王正 | 申请(专利权)人: | 深信服科技股份有限公司 |
主分类号: | G06F3/06 | 分类号: | G06F3/06;G06F11/07 |
代理公司: | 深圳市深佳知识产权代理事务所(普通合伙) 44285 | 代理人: | 夏欢 |
地址: | 518055 广东省深圳市南*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 数据 命令 处理 方法 装置 电子设备 存储 介质 | ||
本申请公开了一种数据写命令处理方法,区别于现有存储系统一味追求数据可靠性、忽视可能对分布式存储集群整体运行造成严重影响的方式,本申请预先设置了短于超时时长的第一预设时长,并直接根据在该第一预设时长返回写完成命令的副本磁盘的数量是否过总数的半数,来提前判断得到本次数据写命令是否成功的结果。相比于现有技术,本申请由于该第一预设时长的设置,使得数据可靠性略有降低,但能够更好的保障分布式存储系统整体的持续、稳定运行。本申请还同时公开了一种数据写命令处理装置、电子设备及可读存储介质,具有上述有益效果。
技术领域
本申请涉及分布式存储技术领域,特别涉及一种数据写命令处理方法、装置、电子设备及可读存储介质。
背景技术
在分布式存储系统中,一份相同数据将通过副本冗余机制将被同时存储在不同的存储节点中,以提升数据的可靠性。以三副本为例,现有存储系统为了充分保障数据的可靠性,在接收到上层业务系统下发的数据写命令时,会将待写数据分别写入第一副本磁盘、第二副本磁盘和第三副本磁盘,并在接收到全部副本磁盘返回的写完成信号后才判定得到本次数据写命令的成功与否,最终将判定结果反馈给业务系统(可参见如图1所示的流程示意图)。
现有方案为了保障数据的可靠性,必须要依据所有副本磁盘返回的信号才能够判定得到本次数据写命令成功的结果,否则将一直等下去。由于系统的复杂性,待写数据写入任意副本磁盘的过程可能会出现各种问题,例如磁盘硬件故障、进程死锁、主机内存不足等原因引起将会导致IO卡慢,并进一步存储系统也需要等待一段时间才能收到反馈信号。而较长的等待时间将可能会对所处的运行环境造成严重影响,例如windows系统可能会在IO超过7秒仍不返回的情况下出现蓝屏、Oracle rac可能会在IO超过10多秒仍不返回的情况下宕机(请参见图2,图2在图1的基础上示出了由于IO卡慢导致副本磁盘2花费10秒才向存储系统返回信号的情况)。
某一个出现卡慢的存储节点,不仅会对存储该节点的所有数据的读写都将造成影响,甚至还会影响到整个存储卷或存储集群。相比于对整个分布式存储系统带来的影响,数据的可靠性无疑显得不是那么重要。
因此,如何克服上述技术缺陷,提供一种以保障分布式存储集群持续、稳定运行为最高目的的数据写命令处理方法,是本领域技术人员亟待解决的问题。
发明内容
本申请的目的是提供一种数据写命令处理方法、装置、电子设备及可读存储介质,旨在尽可能的保障分布式存储集群持续、稳定运行。
为实现上述目的,本申请提供了一种数据写命令处理方法,该方法包括:
根据接收到的数据写命令,将待写数据分别写入对应的每个副本磁盘;
统计在第一预设时长内返回写完成信号的副本磁盘的实际数量;其中,所述第一预设时长短于导致所在存储集群产生异常的超时时长;
判断所述实际数量是否超过所述副本磁盘的总数量的一半;
若所述实际数量超过所述总数量的一半,则上报所述数据写命令完成的反馈信息。
可选的,在上报所述数据写命令完成的反馈信息之后,还包括:
将未在所述第一预设时长内返回所述写完成信号的副本磁盘标记为异常磁盘;
将所述异常磁盘设置为静默状态,得到故障磁盘;
通过预设路径上报针对所述故障磁盘的故障修复通知。
可选的,将所述异常磁盘设置为静默状态之前,还包括:
判断第二预设时长内是否存在返回所述写完成信号的异常磁盘;其中,所述第二预设时长的起始时刻为所述第一预设时长的结束时刻,所述第一预设时长和所述第二预设时长的时长总和短于所述超时时长;
若存在返回所述写完成信号的异常磁盘,则去除所述异常磁盘的标记;
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于深信服科技股份有限公司,未经深信服科技股份有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201911193363.0/2.html,转载请声明来源钻瓜专利网。
- 上一篇:一种适用于支撑大管径管材上料的升降平台
- 下一篇:一种架线电机车漏电防护装置
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置