[发明专利]一种对象存储平台以及对象聚合方法、装置和服务器

说明书

本发明实施例公开了一种对象存储平台以及对象聚合方法、装置和服务器。其中，该平台包括：对象存储网关、第一存储池和第二存储池，第一存储池存储有未聚合到第二类对象的第一类对象，以及已聚合到第二类对象的第一类对象与所聚合到的第二类对象之间的聚合映射关系，第二存储池存储有由第一类对象聚合后的第二类对象；对象存储网关定期将第一存储池内未聚合到第二类对象的第一类对象聚合到第二存储池内的第二类对象中，并在第一存储池内将本次聚合的第一类对象更换为该第一类对象与所聚合到的第二类对象之间的聚合映射关系。本发明实施例提供的技术方案，优化了第一类对象的存储结构，提高了未聚合到第二类对象的第一类对象的读取性能。

技术领域

本发明实施例涉及数据处理技术领域，尤其涉及一种对象存储平台以及对象聚合方法、装置和服务器。

背景技术

随着多媒体资源(如图片、音视频等)的逐渐增加，当前开源的Ceph文件系统对于不同大小下的文件对象，会存在相应的存储和操作需求，而Ceph文件系统会为数据存储分配一个最小空间单元，即使小对象的数据量小于该最小空间单元也会全部占用该最小空间单元，导致存储空间的极大浪费；同时Ceph文件系统在扩容或者硬件故障时，通常以所支持的最小操作粒度为单位对其上存储的文件对象进行转移，此时对于数据量低于该最小操作粒度的小对象，Ceph文件系统在执行转换操作时可能会存在丢失数据的风险，而且大量小对象的转移会极大增加Ceph文件系统的数据读写效率。

目前，Ceph文件系统针对数据量低于最小操作粒度的小对象，将多个小对象合并成一个大对象存储时，会利用第三方存储系统额外存储各个小对象的自定义对象名与在大对象中的合并位置之间的映射关系，此时借助第三方存储系统的功能，增加了对象存储的复杂性和维护难度，并使合并后的对象操作性能较差。

发明内容

本发明实施例提供了一种对象存储平台以及对象聚合方法、装置和服务器，优化第一类对象的存储结构，降低对象存储的复杂性。

第一方面，本发明实施例提供了一种对象存储平台，该平台包括：对象存储网关、第一存储池和第二存储池，所述第一存储池为在内部存储空间上采用固态磁盘技术构建出的存储空间，存储有未聚合到第二类对象的第一类对象，以及已聚合到第二类对象的第一类对象与所聚合到的第二类对象之间的聚合映射关系，所述第二存储池为在内部存储空间上采用常规磁盘技术构建出的存储空间，存储有第一类对象聚合后的第二类对象；其中，

所述对象存储网关定期将所述第一存储池内未聚合到第二类对象的第一类对象聚合到所述第二存储池内的第二类对象中，并在所述第一存储池内将本次聚合的第一类对象更换为该第一类对象与所聚合到的第二类对象之间的聚合映射关系。

第二方面，本发明实施例提供了一种对象聚合方法，应用于上述第一方面中提供的对象存储平台中，该方法包括：

定期在第一存储池内查找出未聚合到第二类对象的第一类对象；

将未聚合到第二类对象的第一类对象聚合到第二存储池内的第二类对象中，并在所述第一存储池内将本次聚合的第一类对象更换为该第一类对象与所聚合到的第二类对象之间的聚合映射关系；

其中，所述第一存储池为在内部存储空间上采用固态磁盘技术构建出的存储空间，存储有未聚合到第二类对象的第一类对象，以及已聚合到第二类对象的第一类对象与所聚合到的第二类对象之间的聚合映射关系，所述第二存储池为在内部存储空间上采用常规磁盘技术构建出的存储空间，存储有第一类对象聚合后的第二类对象。

第三方面，本发明实施例提供了一种对象聚合装置，设置于上述第一方面中提供的对象存储平台中，该装置包括：

对象查找模块，用于定期在第一存储池内查找出未聚合到第二类对象的第一类对象；

对象聚合模块，用于将未聚合到第二类对象的第一类对象聚合到第二存储池内的第二类对象中，并在所述第一存储池内将本次聚合的第一类对象更换为该第一类对象与所聚合到的第二类对象之间的聚合映射关系；