[发明专利]一种提高存储系统处理小文件的方法以及存储系统

说明书

本发明公开了一种提高存储系统处理小文件的方法以及存储系统，所述存储系统包括第一存储空间、第二存储空间和第三存储空间，所述第二存储空间的读写性能优于第一存储空间的读写性能，所述方法包括：接收待存储文件；判断待存储文件的大小是否大于阈值；若大于阈值，将所述待存储文件存储至第一存储空间；若小于或等于阈值，将所述待存储文件存储至第二存储空间；将所述待存储文件的文件标识、大小以及所述待存储文件在第一存储空间或者第二存储空间的存储地址存储至元数据,并建立所述待存储文件的文件标识、大小和存储地址之间的对应关系。通过上述方式，本发明能够提高对大小小于阈值的文件的读写速度。

技术领域

本发明涉及存储处理技术领域，特别是涉及一种提高存储系统处理小文件的方法以及存储系统。

背景技术

随着科学技术的发展，电子设备越来越小，人们越来越喜欢通过电子设备进行办公、学习、娱乐等等。

为了方便异地取数据，用户越来越喜欢将数据存储在云端的存储系统，由此造成云端的存储系统所存储的数据呈现爆炸性的增长，存储系统也越来越庞大。庞大的存储数据对存储系统的处理性能也提出更高的要求。为了应对庞大的存储数据，传统存储系统主要通过增加处理器的方式来提高处理性能，其成本非常昂贵。

在本申请的发明人在长期的研究中发现：大部份的存储系统中所存储的数据中大部分文件都是小于1M的小文件，在某些应用场景下，小文件的数量可达到千万级别以上，并且小文件的读写频率也非常高，但是传统存储系统没有区别小文件和大文件，而统一存储，因此，很多时候，存储系统频繁读写小文件的极限为存储系统的性能瓶颈。

发明内容

本发明主要解决的技术问题是提供一种提高存储系统处理小文件的方法以及存储系统，能够提高对大小小于阈值的文件的读写速度。

为解决上述技术问题，本发明采用的一个技术方案是：提供一种提高存储系统处理小文件的方法，存储系统包括第一存储空间、第二存储空间和第三存储空间，所述第二存储空间的读写性能优于第一存储空间的读写性能，所述方法包括：接收待存储文件；判断待存储文件的大小是否大于阈值；若大于阈值，将所述待存储文件存储至第一存储空间；若小于或等于阈值，将所述待存储文件存储至第二存储空间；将所述待存储文件的文件标识、大小以及所述待存储文件在第一存储空间或者第二存储空间的存储地址存储至元数据,并建立所述待存储文件的文件标识、大小和存储地址之间的对应关系。

其中，所述方法包括：接收文件增加请求，其中，所述文件增加请求携带待增内容和待增文件的文件标识；根据所述待增文件的文件标识，从所述第三存储空间获取所述待增文件所存储的存储地址和待增文件的大小；根据所述待增文件的大小，判断所述待增文件是否存储在第二存储空间；若是，则判断所述待增内容的大小和待增文件的大小之和是否大于阈值；若大于阈值，则根据所述待增文件所存储的存储地址获取待增文件，并将所述待增文件转移至第一存储空间；将所述待增内容存储至待增文件中，并将所述待增文件在第一存储空间的存储地址以及增加内容后的待增文件的大小更新至第三存储空间。

其中，所述方法包括：接收文件内容删除请求，其中，所述文件内容删除请求携带待删文件的文件标识和删除标识；根据所述待删文件的文件标识，从所述第三存储空间获取所述待删文件所存储的存储地址和待删文件的大小；根据所述待删文件所存储的存储地址，获取所述待删文件，并结合删除标识对所述待删文件的内容进行删除；根据待删文件的大小，判断所述待删文件是否位于第一存储空间，以及判断删除内容后的待删除文件的大小是否小于或者等于阈值；若所述待删文件位于第一存储空间，以及删除内容后的所述待删除文件的大小小于或者等于阈值，则将所述删除内容后的待删除文件转移至第二存储空间，并将所述待删除文件在第二存储空间中的存储地址以及删除内容后的所述待删除文件的大小更新至第三存储空间。