[发明专利]一种小文件的存储、查询及删除方法和系统

说明书

本发明公开了一种小文件的存储、查询及删除方法和系统，首先创建一个大文件，然后将小文件合并入大文件的小文件存储区域。在进行小文件的查询时，首先根据索引区偏移量和小文件的文件元数据信息查询小文件的索引信息；之后再根据小文件索引信息中的小文件在大文件中的相对偏移量和文件大小获取存储在大文件中的小文件。通过本发明所述的方法和系统，可以根据小文件的元数据信息快速定位小文件，有效提高了大文件中小文件的检索和处理效率。

技术领域

本发明涉及文件处理领域，具体涉及一种小文件的存储、查询及删除方法和系统。

背景技术

随着信息化的发展，文件越来越多，尤其是对于金融等行业，小文件(小文件一般指文件大小较小的文件，如几百KB，几十KB)数量增长很快，由于金融需要这些小文件不能删除，但小文件管理和备份的难度越来越大。

目前对于小文件管理与备份一般的解决方案是合并为一个大文件(大文件一般指文件大小较大的文件，如几GB，几十GB)，将多个小文件合并为一个大文件存放，可以有效缓解这个压力，但这种简单的合并对于文件的查询检索很不方便。在将多个小文件合并为一个大文件时，建立一个文件索引表，在这个表中包含对于每个小文件多个维度的描述信息，在查找小文件时，先查询文件索引表再定位文件，这样既可以解决小文件的管理和备份问题，也可以解决合并为一个大文件之后的检索问题。但是在将多个小文件合并为一个大文件之后，对于小文件的检索效率很低，如果想查看小文件的一些属性和内容需要将小文件从大文件中取出来，甚至有的方式会将大文件再分离为多个小文件。

发明内容

针对现有技术中存在的缺陷，本发明的目的在于提供一种小文件的存储、查询及删除方法和系统，提高小文件的检索效率。

为实现上述目的，本发明采用的技术方案如下：

一种小文件的存储方法，包括以下步骤：

(1)创建一个大文件；所述的大文件包括索引区偏移量存储区域、小文件存储区域和小文件索引信息存储区域；索引区偏移量是指小文件索引信息存储区域的起始位置在整个大文件中的相对偏移量；

(2)将小文件合并入大文件的小文件存储区域。

进一步，如上所述的一种小文件的存储方法，步骤(1)中，小文件索引信息包括小文件的文件名称、文件大小、文件元数据信息和小文件在整个大文件中的相对偏移量。

进一步，如上所述的一种小文件的存储方法，所述的文件元数据信息是指小文件中所存储的业务类型的信息。

进一步，如上所述的一种小文件的存储方法，步骤(2)中，将小文件合并入大文件的小文件存储区域的具体方式包括：

a.获取小文件的大小；

b.将小文件索引信息存储区域向后偏移小文件大小，并更新索引区偏移量；

c.将小文件存储在小文件存储区域；

d.在小文件索引信息存储区域中添加小文件的索引信息。

一种小文件的查询方法，包括以下步骤：

(1)根据索引区偏移量和小文件的文件元数据信息查询小文件的索引信息；

(2)根据小文件索引信息中的小文件在大文件中的相对偏移量和文件大小获取存储在大文件中的小文件。

进一步，如上所述的一种小文件的查询方法，步骤(1)中，通过正则表达式的方式查询小文件的索引信息。

一种小文件的删除方法，包括以下步骤：

(1)根据小文件的文件元数据信息查询小文件的索引信息；