[发明专利]集群文件系统的数据读写方法、装置及设备和存储介质有效
申请号: | 202010567622.8 | 申请日: | 2020-06-19 |
公开(公告)号: | CN111737221B | 公开(公告)日: | 2022-04-22 |
发明(设计)人: | 方浩;张东 | 申请(专利权)人: | 浪潮电子信息产业股份有限公司 |
主分类号: | G06F16/182 | 分类号: | G06F16/182;G06F16/13;G06F16/16 |
代理公司: | 北京集佳知识产权代理有限公司 11227 | 代理人: | 王晓坤 |
地址: | 250101 山东*** | 国省代码: | 山东;37 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 集群 文件系统 数据 读写 方法 装置 设备 存储 介质 | ||
本申请公开了一种集群文件系统的数据读写方法、装置及设备和介质,该方法包括:获取数据写入请求,得到写入起始位置和写入数据长度;根据写入起始位置,写入数据长度和数据块的大小,确定数据写入请求对应的写入方式是否为对齐写;如果否,则根据写入起始位置、写入数据长度对数据块中的第一目标数据区域进行标记,数据块预先划分为预设数量的数据区域;从添加标记的第一目标数据区域中读取原始数据保存至引用计数树中对应的数据区域,并在完成后将待写入数据写入第一目标数据区域中。本申请预先将数据块划分为预设数量的数据区域,针对小于数据块大小的数据变动,可以较小的数据区域为单位进行读写,避免浪费不必要的资源,提升了数据读写性能。
技术领域
本申请涉及计算机技术领域,更具体地说,涉及一种集群文件系统的数据读写方法、装置及一种电子设备和一种计算机可读存储介质。
背景技术
OCFS2是一种集群文件系统,它广泛应用于云计算、虚拟化系统中。该文件系统常用于FC-SAN及IP-SAN组网的环境中,基于共享磁盘创建文件系统,让集群中所有节点都可以对磁盘数据读写。
Reflink是一种文件系统快速构建数据拷贝的方法,它区别于传统的文件软链接、硬链接的实现。软链接是对于链接文件的目录项增加一个指向源文件的目录项索引,硬链接是对于链接文件的目录项增加指向源文件元数据的索引。而Reflink的实现是对于链接文件创建一个新的元数据,将其数据区域和源文件的数据区域共享。
Reflink文件的读写使用CoW(copy on write,写时复制)的方式,即在对Reflink文件写时,发现较源文件有变化,会将源文件数据拷贝一份,然后将数据写入相应的数据区域。而Reflink的拷贝数据块大小默认1M,对于小于1M的数据变动,也会导致较多的数据拷贝,造成不必要的资源浪费。
因此,如何解决上述问题是本领域技术人员需要重点关注的。
发明内容
本申请的目的在于提供一种集群文件系统的数据读写方法、装置及一种电子设备和一种计算机可读存储介质,避免浪费不必要的资源,提升了数据读写性能。
为实现上述目的,本申请提供了一种集群文件系统的数据读写方法,包括:
获取数据写入请求,通过解析所述数据写入请求得到写入起始位置和写入数据长度;
根据所述写入起始位置,所述写入数据长度和文件系统中数据块的大小,确定所述数据写入请求对应的写入方式是否为对齐写;
如果否,则根据所述写入起始位置、所述写入数据长度对数据块中的第一目标数据区域进行标记,所述数据块预先划分为预设数量的数据区域;
从添加标记的第一目标数据区域中读取原始数据保存至引用计数树中对应的数据区域,并在读取完成后将待写入数据写入所述第一目标数据区域中。
可选的,所述根据所述写入起始位置、所述写入数据长度对数据块中的第一目标数据区域进行标记,包括:
若所述写入数据长度大于文件系统中数据块的大小,则确定所需的第一目标数据块;
根据所述写入数据长度超出数据块大小整数倍的部分确定所需第一目标数据区域的数量;
对所述第一目标数据块和所述目标区域对应的位图数据进行标记;
若所述写入数据长度小于文件系统中数据块的大小,则根据所述写入数据长度确定所需第一目标数据区域的数量,并对所述第一目标数据区域对应的位图数据进行标记。
可选的,所述确定所述数据写入请求对应的写入方式是否为对齐写之后,还包括:
若当前所述数据写入请求对应的写入方式为对齐写,则根据所述写入起始位置,所述写入数据长度确定所需的第一目标数据块;
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于浪潮电子信息产业股份有限公司,未经浪潮电子信息产业股份有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202010567622.8/2.html,转载请声明来源钻瓜专利网。
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置