[发明专利]一种分布式存储系统数据写入方法及分布式存储系统有效
申请号: | 201710399100.X | 申请日: | 2017-05-31 |
公开(公告)号: | CN107229424B | 公开(公告)日: | 2020-09-22 |
发明(设计)人: | 冯龙;王利朋 | 申请(专利权)人: | 苏州浪潮智能科技有限公司 |
主分类号: | G06F3/06 | 分类号: | G06F3/06 |
代理公司: | 北京集佳知识产权代理有限公司 11227 | 代理人: | 罗满 |
地址: | 215100 江苏省苏州市吴*** | 国省代码: | 江苏;32 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 分布式 存储系统 数据 写入 方法 | ||
本申请公开了一种分布式存储系统数据写入方法及分布式存储系统,包括:客户端向协议层持续发送请求指令;协议层将接收到的请求指令中的写IO请求进行合并,并发送至存储资源层;存储资源层对合并后的写IO请求进行处理,并下发至物理磁盘。本申请中协议层将接收到的写IO请求进行合并,即不针对某一单独的协议,在分布式存储系统的底层流程中执行一次操作即可完成客户端向协议层下发的一批操作,从而有效减少频繁写操作时的网络交互和流程耗时,同时合并操作还有利于缓解网络拥堵、减少CPU资源占用,有效提升整个分布式存储系统的性能。
技术领域
本发明涉及数据存储领域,特别是涉及一种分布式存储系统数据写入方法及分布式存储系统。
背景技术
现有分布式存储系统通常可以向客户提供多种协议的存储服务方式,例如网络文件系统(Network File System,简称NFS)、通用网络文件系统(Common Internet FileSystem,简称CIFS)、小型计算机系统接口(Internet Small Computer System Interface,简称iSCSI),对象存储等。针对某一协议进行性能优化,能够在该协议场景下提升系统的性能。为了全面提升分布式存储系统在不同协议下的性能,对底层IO流程的优化尤为重要,也更有实际价值。
当客户端向协议层下发频繁的小IO写操作时,协议层与存储资源层频繁交互,造成大量的网络消耗,同时在写流程的处理上有较多的时间消耗,从而影响这种场景下的存储性能。
目前,现有的文件聚合是一种常用的合并技术,具体的实现方法是指在文件系统客户端将写入的多个文件合并在一起,然后下发给分布式存储资源层。该方法的具体合并是在客户端实现的,针对的对象是文件,而非来自客户端的操作,较复杂。并且,该技术只针对文件系统形式的共享存储协议如NFS、CIFS等进行IO合并优化,但是块存储如iSCSI协议并不适用,此外对文件系统中大文件小IO的情况也不能很好的解决。
因此,不针对某一单独的协议,如何更好的解决写IO流程网络交互频繁、耗时过多的情况,是本领域技术人员亟待解决的技术问题。
发明内容
有鉴于此,本发明的目的在于提供一种分布式存储系统数据写入方法及分布式存储系统,可以有效减少频繁写操作时的网络交互和流程耗时,同时合并操作还有利于缓解网络拥堵、减少CPU资源占用。其具体方案如下:
一种分布式存储系统数据写入方法,包括:
客户端向协议层持续发送请求指令;
所述协议层将接收到的所述请求指令中的写IO请求进行合并,并发送至存储资源层;
所述存储资源层对合并后的所述写IO请求进行处理,并下发至物理磁盘。
优选地,在本发明实施例提供的上述分布式存储系统数据写入方法中,所述协议层将接收到的所述请求指令中的写IO请求进行合并,具体包括:
所述协议层将接收到的所述请求指令中待写入至相同的物理磁盘的写IO请求进行合并。
优选地,在本发明实施例提供的上述分布式存储系统数据写入方法中,所述协议层将接收到的所述请求指令中待写入至相同的物理磁盘的写IO请求进行合并,具体包括:
所述协议层判断当前接收到的所述请求指令是否是写操作;
若当前接收到的所述请求指令是写操作,则将当前接收到的所述请求指令中的写IO请求和与当前接收到的所述请求指令待写入的物理磁盘相同的之前接收到的所述请求指令中的写IO请求进行合并;
若否,则将当前接收到的请求指令中的IO直接下发。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于苏州浪潮智能科技有限公司,未经苏州浪潮智能科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201710399100.X/2.html,转载请声明来源钻瓜专利网。
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置