[发明专利]一种改进的IO限流处理方法和系统有效
申请号: | 201710979190.X | 申请日: | 2017-10-19 |
公开(公告)号: | CN107741917B | 公开(公告)日: | 2021-05-18 |
发明(设计)人: | 陆力信;王永刚 | 申请(专利权)人: | 郑州云海信息技术有限公司 |
主分类号: | G06F13/40 | 分类号: | G06F13/40;G06F13/20 |
代理公司: | 北京集佳知识产权代理有限公司 11227 | 代理人: | 罗满 |
地址: | 450018 河南省郑州市*** | 国省代码: | 河南;41 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 改进 io 限流 处理 方法 系统 | ||
本发明公开了一种IO限流处理方法和系统,其中方法包括:步骤1,在存储设备端设置IO负载限制模块;步骤2,所述IO负载限制模块将主机下发到所述存储设备端的数据根据预置的IOPS限制和带宽限制进行传输。通过在存储设备端设置IO负载限制模块,将主机下发到所述存储设备端的数据根据预置的IOPS限制和带宽限制进行传输,平衡了下发IO到LUN的负载,稳固了存储系统下发IO的稳定性,极大地保证了系统的稳定性。
技术领域
本发明涉及数据存储技术领域,特别是涉及一种改进的IO限流处理方法和系统。
背景技术
随着计算机技术的飞速发展,很多技术都有了大幅度的提升,尤其是对后端存储系统分区的成功使用,满足了服务器主机下发数据的安全性和稳定性的要求。并且缓存和闪存的成功使用,满足了各个计算机领域对于计算资源和计算速率的需求,这种处理方式极大地加快了数据处理的速度。
然而通用的主机与存储系统的IO数据传输方式,虽然加强主机与存储系统的之间数据传输的效率,但并没有考虑LUN的承受能力,如果主机层下发IOPS过大,或带宽过高,很可能会造成IO传输的不稳定,甚至是IO中断。
因此,如何稳固主机与存储设备之间的数据传输,加强数据的安全管理就是需要亟需解决的问题。
发明内容
本发明的目的是提供了一种IO限流处理方法和系统,稳固主机和存储设备之间的数据传输,加强了数据的安全管理。
为解决上述技术问题,本发明实施例提供了一种IO限流处理方法,包括:
步骤1,在存储设备端设置IO负载限制模块;
步骤2,所述IO负载限制模块将主机下发到所述存储设备端的数据根据预置的IOPS限制和带宽限制进行传输;
所述步骤1包括:
在所述IO负载限制模块中创建fast_path_fbr结构和slow_path_fbr结构,并注册到系统中;
所述系统将主机下发的IO进行分类存储带所述fast_path_fbr结构和slow_path_fbr结构中,并且创建对应的fast path线程和slow path线程,其中,所述fast path线程用于处理fast_path_fbr内的IO数据,slow path线程用于处理普通非IO命令,以及所述fast_path_fbr结构中的fail IO及超过等待时间阈值的IO。
其中,在所述步骤1之前,还包括:
解析所述系统的HCCB结构,获取所述主机下发命令的flag,过滤非IO命令。
其中,在所述步骤3之后,还包括:
根据所述fast_path_fbr结构和所述slow_path_fbr结构的处理速度以及所述slow_path_fbr结构中的存储的IO数量,估算并输出IO延时时间。
其中,在所述步骤3之后还包括:
对所述IO负载限制模块进行定时设置,设置在所述IO负载限制模块的开启时间和关闭时间。
除此之外,本发明实施例还提供了一种IO限流处理系统,包括设置在存储设备端的IO负载限制模块,用于在主机向所述存储设备端发布命令进行数据传输时,对设置在所述存储设备端指定的LUN进行写入或读取时进行IOPS和带宽的限定。
其中,还包括与所述IO负载限制模块连接的定时模块,用于根据用户的需要设定IO负载限制模块的开启时间和关闭时间。
其中,所述IO负载限制模块包括用于存储需要处理IO的待处理IO单元和被截留IO的IO截留单元。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于郑州云海信息技术有限公司,未经郑州云海信息技术有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201710979190.X/2.html,转载请声明来源钻瓜专利网。