[发明专利]小文件管理方法、电子设备及存储装置

说明书

本申请公开了一种小文件管理方法、存储服务器及存储装置。其中，小文件管理方法包括：响应于来自终端的包含待写入小文件的写请求，在当前可写入的第一大文件中为待写入小文件分配写入地址；基于待写入小文件的写入信息，生成待写入小文件的索引信息和读取地址；其中，写入信息至少包括写入地址，索引信息用于在读取小文件时进行验证，并在验证通过时允许读取对应小文件；按照待写入小文件的写入地址，将待写入小文件和索引信息写入第一大文件中。上述方案，能够拒绝掉一些非法的请求、屏蔽掉数据暴露的风险，提高小文件读写的安全性和可靠性。

技术领域

本申请涉及云存储、文件读写技术领域，尤其涉及一种小文件管理方法、电子设备及存储装置。

背景技术

当前云存储系统在面临海量小文件的场景时，由于海量小文件带来的元数据总量庞大，要求的存储空间容量巨大，且元数据操作性能要求较高，使得能存储的文件个数受限，且性能也难以满足业务系统频繁写入删除小文件的要求。

针对于上述情况，一般采用的方式之一就是小文件组合成大文件进行存储。但是现有的方案中很少考虑到系统安全性和可靠性，而安全性和可靠性是数据存储中不可缺少的一部分。

发明内容

本申请主要解决的技术问题是提供一种小文件管理方法、电子设备及存储装置，能够提高小文件读写的安全性和可靠性。

为了解决上述问题，本申请第一方面提供了一种小文件管理方法，包括：响应于来自终端的包含待写入小文件的写请求，在当前可写入的第一大文件中为待写入小文件分配写入地址；基于待写入小文件的写入信息，生成待写入小文件的索引信息和读取地址；其中，写入信息至少包括写入地址，索引信息用于在读取小文件时进行验证，并在验证通过时允许读取对应小文件；按照待写入小文件的写入地址，将待写入小文件和索引信息写入第一大文件中。

其中，该方法还包括：接收终端发送的读请求，其中，读请求包括待读取小文件的读取地址；基于待读取小文件的读取地址，获取待读取小文件的写入信息；基于待读取小文件的写入信息，从待读取小文件所在的第二大文件中读取待读取小文件的索引信息；对读取的索引信息进行验证；若验证通过，则基于待读取小文件的写入信息，从第二大文件中读取待读取小文件，并将待读取小文件发送给终端。

其中，写入信息包括：小文件所写入的大文件的标识信息、写入地址和小文件的数据长度；索引信息和读取地址中均至少由小文件所写入的大文件的标识信息、写入地址和小文件的数据长度组成。

其中，对读取的索引信息进行验证，包括：验证读取的索引信息是否满足预设条件；其中，预设条件包括以下至少一种：验证读取的索引信息符合预设格式；由读取的索引信息得到的第二大文件的标识信息与由待读取小文件的读取地址所得到的标识信息一致；由读取的索引信息得到的写入地址与由待读取小文件的读取地址所得到的写入地址一致；由读取的索引信息得到的数据长度与由待读取小文件的读取地址所得到的数据长度是否一致。

其中，基于待写入小文件的写入信息生成待写入小文件的读取地址，包括：基于待写入小文件的至少部分内容生成第一密钥，并利用第一密钥将待写入小文件的数据长度进行加密；基于第一大文件的至少部分内容生成第二密钥，并利用第二密钥将待写入小文件的写入地址以及已加密的数据长度进行加密，得到加密后的关键数据；利用第一大文件的标识信息以及加密后的关键数据生成待写入小文件的读取地址；基于待读取小文件的读取地址，获取待读取小文件的写入信息，包括：基于待读取小文件的读取地址获取第二大文件的标识名称以及加密后的关键数据；基于第二大文件的至少部分内容生成第二密钥，利用第二密钥对关键数据进行解密，得到待读取小文件的写入地址和已加密的数据长度；利用待读取小文件的写入地址，从第二大文件中读取待读取小文件的至少部分内容；基于读取的内容生成第一密钥，利用第一密钥对已加密的数据长度进行解密，得到解密后的待读取小文件的数据长度。