[发明专利]基于软件定义存储的磁盘状态分析方法及装置、电子设备在审
申请号: | 202011250284.1 | 申请日: | 2020-11-10 |
公开(公告)号: | CN112328453A | 公开(公告)日: | 2021-02-05 |
发明(设计)人: | 张旭明;王豪迈;胥昕;翟静 | 申请(专利权)人: | 星辰天合(北京)数据科技有限公司 |
主分类号: | G06F11/30 | 分类号: | G06F11/30;G06F3/06 |
代理公司: | 北京康信知识产权代理有限责任公司 11240 | 代理人: | 周春枚 |
地址: | 100097 北京市海淀区蓝*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 基于 软件 定义 存储 磁盘 状态 分析 方法 装置 电子设备 | ||
本发明公开了一种基于软件定义存储的磁盘状态分析方法及装置、电子设备。其中,该方法包括:采集历史数据中的磁盘信息,其中,所述磁盘信息中至少包括:磁盘故障信息;基于所述磁盘信息,训练磁盘健康预测模型;采用所述磁盘健康预测模型分析所有磁盘集群中每个磁盘的磁盘健康状态;基于所述磁盘健康状态,调整数据调度策略。本发明解决了相关技术中无法对磁盘健康状态进行分析,容易导致部分硬盘损坏,影响产品整体可靠性的技术问题。
技术领域
本发明涉及终端设备分析技术领域,具体而言,涉及一种基于软件定义存储的磁盘状态分析方法及装置、电子设备。
背景技术
相关技术中,软件定义存储通过海量硬盘构建存储池,并提供服务,随着时间的推移,硬盘之间呈现不同的健康状态,有些硬盘濒临损坏,有些硬盘状态良好;在一些扩容或者利旧的场景下,新老硬盘同时服务,健康状态差异也较大,现有技术没有对硬盘健康状态进行有效的识别,更没有根据磁盘健康状态进行IO压力调度,基本上一视同仁的处理存储池中的所有硬盘,导致部分硬盘提前损坏,影响产品的整体可靠性。
即当前的软件定义存储中,无法合理分析各个磁盘的使用状态和健康状态,基本上是发现磁盘处于亚健康或者错误状态后,停止磁盘的使用,将其踢出管理集群,这种方式不仅容易导致磁盘易损坏,且部分磁盘出现健康状态后,若是强行分配IO任务,会容易出现单点压力过大导致的磁盘健康持续受损的情况发生。
针对上述的问题,目前尚未提出有效的解决方案。
发明内容
本发明实施例提供了一种基于软件定义存储的磁盘状态分析方法及装置、电子设备,以至少解决相关技术中无法对磁盘健康状态进行分析,容易导致部分硬盘损坏,影响产品整体可靠性的技术问题。
根据本发明实施例的一个方面,提供了一种基于软件定义存储的磁盘状态分析方法,包括:采集历史数据中的磁盘信息,其中,所述磁盘信息中至少包括:磁盘故障信息;基于所述磁盘信息,训练磁盘健康预测模型;采用所述磁盘健康预测模型分析所有磁盘集群中每个磁盘的磁盘健康状态;基于所述磁盘健康状态,调整数据调度策略。
可选地,采集历史数据中的磁盘信息和磁盘故障信息的步骤,包括:确定每个所述磁盘集群中的磁盘数量和磁盘标识;基于每个所述磁盘集群中的磁盘数量和所述磁盘标识,采集历史数据中对应于时间点变化的所述磁盘信息和所述磁盘故障信息。
可选地,所述磁盘信息包括下述至少之一:磁盘IO访问次数、每个磁盘分区的大小、磁盘上下电次数、磁盘上下电时间、磁盘坏块信息、读写错误率、磁盘故障信息、累计通电时间,其中,所述磁盘故障信息至少包括:磁盘损坏状态、故障时间点、IO传输时延高于预设时延阈值的时间点、故障标签。
可选地,基于所述磁盘信息,训练磁盘健康预测模型的步骤,包括:确定所述磁盘信息中每种磁盘类型对应的状态数据;对每种所述磁盘类型所对应的状态数据进行标签分类和格式化处理,得到状态处理结果;基于所述状态处理结果,以所述磁盘信息中的磁盘基本状态信息作为训练数据,并以磁盘故障信息作为标签结果数据,训练所述磁盘健康预测模型。
可选地,采用所述磁盘健康预测模型分析所有磁盘集群中每个磁盘的磁盘健康状态的步骤,包括:采用所述磁盘健康预测模型分析每个磁盘的故障概率值;基于每个磁盘的故障概率值,确定每个磁盘的磁盘健康值。
可选地,在所述数据调度策略包括:数据分配策略,所述基于所述磁盘健康状态,调整数据调度策略的步骤,包括:基于每个磁盘的磁盘健康值,调整数据分配策略,其中,所述数据分配策略至少包括:每个磁盘的数据分配容量。
可选地,在所述数据调度策略包括:IO访问策略,所述基于所述磁盘健康状态,调整数据调度策略的步骤,还包括:基于每个磁盘的磁盘健康值,调整IO访问策略,其中,所述IO访问策略至少包括:每个磁盘的IO访问通道占用率。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于星辰天合(北京)数据科技有限公司,未经星辰天合(北京)数据科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202011250284.1/2.html,转载请声明来源钻瓜专利网。