[发明专利]一种文件存储的方法及装置在审
申请号: | 201710351825.1 | 申请日: | 2017-05-18 |
公开(公告)号: | CN107016130A | 公开(公告)日: | 2017-08-04 |
发明(设计)人: | 王小梅 | 申请(专利权)人: | 郑州云海信息技术有限公司 |
主分类号: | G06F17/30 | 分类号: | G06F17/30 |
代理公司: | 北京集佳知识产权代理有限公司11227 | 代理人: | 罗满 |
地址: | 450018 河南省郑州市*** | 国省代码: | 河南;41 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 文件 存储 方法 装置 | ||
技术领域
本发明涉及文件系统领域,特别是涉及一种文件存储的方法及装置。
背景技术
随着文件系统技术的发展,分布式存储文件系统的应用也越来越广泛。
分布式存储文件系统中,为了应对海量小文件存储场景,一般将小文件聚合写入磁盘中,以减少写入磁盘的次数,提高文件写性能。但是,当文件只是较大,以或者是数量不多时,就没有必要再利用文件聚合写功能来实现文件存储。
当文件较大或者数量较少时,利用小文件聚合写功能会使得底层集群的写入压力较大。
发明内容
本发明的目的是提供一种文件存储的方法及装置,目的在于解决现有技术中文件较大且数量较少时,利用小文件聚合写功能会使得底层集群的写入压力较大的问题。
为解决上述技术问题,本发明提供一种文件存储的方法,该方法包括:
检测待存储文件的目录属性,判断所述目录属性是否为预先根据应用场景设定的聚合属性;
若是,开启文件聚合写功能,将所述待存储文件存储至聚合文件,当所述聚合文件内的OBJ对象的剩余存储空间等于或小于预设容量时,将所述OBJ对象内的多个所述待存储文件批量写入磁盘,所述聚合文件包含多个OBJ对象;
若否,将所述待存储文件写入磁盘。
可选地,在所述检测待存储文件的目录属性,判断所述目录属性是否为预先根据应用场景设定的聚合属性之前还包括:
接收设置指令;
根据所述设置指令,将当前文件扩展属性内的字段值设为预设数值,以将所述当前文件的目录属性设为聚合属性。
可选地,所述检测待存储文件的目录属性,判断所述目录属性是否为预先根据应用场景设定的聚合属性包括:
判断所述待存储文件的所述字段值是否为所述预设数值;
若是,确定所述待存储文件的所述目录属性为所述聚合属性;
若否,确定所述待存储文件的所述目录属性为非聚合属性。
此外,本发明还提供了一种文件存储的装置,该装置包括:
判断模块,用于检测待存储文件的目录属性,判断所述目录属性是否为预先根据应用场景设定的聚合属性;
聚合写模块,用于若是,开启文件聚合写功能,将所述待存储文件存储至聚合文件,当所述聚合文件内的OBJ对象的剩余存储空间等于或小于预设容量时,将所述OBJ对象内的多个所述待存储文件批量写入磁盘,所述聚合文件包含多个OBJ对象;
非聚合写模块,用于若否,将所述待存储文件写入磁盘。
可选地,还包括:
接收模块,用于接收设置指令;
数值设置模块,用于根据所述设置指令,将当前文件扩展属性内的字段值设为预设数值,以将所述当前文件的目录属性设为聚合属性。
可选地,所述判断模块包括:
数值判断单元,用于判断所述待存储文件的所述字段值是否为所述预设数值;
第一确定单元,用于若是,确定所述待存储文件的所述目录属性为所述聚合属性;
第二确定单元,用于若否,确定所述待存储文件的所述目录属性为非聚合属性。
本发明所提供的一种文件存储的方法及装置,通过检测待存储文件的目录属性,判断目录属性是否为预先根据应用场景设定的聚合属性;若是,开启文件聚合写功能,将待存储文件存储至聚合文件,当聚合文件内的OBJ对象的剩余存储空间等于或小于预设容量时,将OBJ对象内的多个所述待存储文件批量写入磁盘,聚合文件包含多个OBJ对象;若否,将待存储文件写入磁盘。本申请通过判断目录属性是否为聚合属性,来确定当前文件是文件聚合写,还是普通的非聚合写,实现根据场景不同,预先设定目录属性,选择性开启或关闭文件聚合写功能,以减少底层集群的写入压力。
附图说明
为了更清楚的说明本发明实施例或现有技术的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单的介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1为本发明实施例所提供的文件存储方法的一种具体实施方式的流程示意图;
图2为本发明实施例所提供的文件存储装置的结构框图。
具体实施方式
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于郑州云海信息技术有限公司,未经郑州云海信息技术有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201710351825.1/2.html,转载请声明来源钻瓜专利网。