[发明专利]一种文件聚合方法、装置、设备及可读存储介质

说明书

本申请公开了一种文件聚合方法、装置、设备及计算机可读存储介质，该方法包括：将待写入文件放入写入队列，并更新写入队列对应的B+树；根据B+树在写入队列中确定待聚合文件，并对待聚合文件进行聚合处理，得到聚合文件；调用对象接口将聚合文件写入文件系统；该方法不在文件系统内对待聚合文件进行聚合，而是在文件系统的上层对待聚合文件进行聚合，即在将待聚合文件写入文件系统前将其聚合，因此不需要多次调用对象接口将待聚合文件写入文件系统，对象接口性能较好，避免了对对象接口造成较大的性能影响。

技术领域

本申请涉及对象存储技术领域，特别涉及一种文件聚合方法、文件聚合装置、文件聚合设备及计算机可读存储介质。

背景技术

对象存储是目前云计算领域最重要的存储形式之一，以目录文件的方式存储数据，以对象接口方式对外提供服务是单机实现对象服务的重要方式，小文件的读写一直是存储系统性能的痛点，在对象存储中亦是如此，为了提高单个机器以文件为存储形式的对象存储的性能，相关技术会将文件系统中的小文件进行聚合。然而，相关技术需要在文件系统中进行小文件的聚合，导致聚合效率较低，对象接口的性能较差。

因此，如何解决相关技术导致聚合效率较低，对象接口的性能较差的问题，是本领域技术人员需要解决的技术问题。

发明内容

有鉴于此，本申请的目的在于提供一种文件聚合方法、文件聚合装置、文件聚合设备及计算机可读存储介质，提高了聚合效率，避免了对对象接口造成较大的性能影响，对象接口性能较好。

为解决上述技术问题，本申请提供了一种文件聚合方法，包括：

将待写入文件放入写入队列，并更新所述写入队列对应的B+树；

根据所述B+树在所述写入队列中确定待聚合文件，并对所述待聚合文件进行聚合处理，得到聚合文件；

调用对象接口将所述聚合文件写入文件系统。

可选地，所述将待写入文件放入写入队列，并更新所述写入队列对应的B+树，包括：

将所述待写入文件放入所述写入队列；

从所述待写入文件的元数据中提取排序信息，并利用所述排序信息对所述B+树进行更新。

可选地，所述从所述元数据信息中提取排序信息，包括：

从所述元数据中提取存储路径信息作为所述排序信息。

可选地，利用所述排序信息对所述B+树进行更新，包括：

根据所述排序信息在所述B+树中新增节点；

或，

根据所述排序信息对所述B+树中的节点进行调整。

可选地，所述根据所述B+树在所述写入队列中确定待聚合文件，并对所述待聚合文件进行聚合处理，得到聚合文件，包括：

遍历所述B+树的各个节点，并判断各个所述节点对应的待写入文件的文件体积是否小于预设阈值；

若所述文件体积小于所述预设阈值，则将对应的所述待写入文件确认为所述待聚合文件；

若当前的所述待聚合文件的总体积处于预设区间，且多增加任意一个所述待聚合文件后所述总体积不处于所述预设区间，则将当前的所述待聚合文件进行聚合处理，得到所述聚合文件。

可选地，还包括：

若所述文件体积不小于所述预设阈值，则调用所述对象接口将所述待写入文件写入所述文件系统。

可选地，再所述调用对象接口将所述聚合文件写入文件系统之后，还包括：