[发明专利]一种对象存储方法、系统及设备

说明书

本发明公开了一种对象存储方法、系统及设备，其中，所述方法应用于对象存储设备中，所述对象存储设备中包括默认列簇和多个扩展列簇，所述方法包括：接收对象存储网关发来的数据写入请求，所述数据写入请求中包括待写入的键值对数据和所述键值对数据对应的列簇标识；若在所述多个扩展列簇中包含具备所述列簇标识的目标扩展列簇，在所述默认列簇中记录所述键值对数据的映射数据，并将所述键值对数据写入所述目标扩展列簇中；其中，在所述多个扩展列簇中，只有当前正在执行数据写入的扩展列簇进行数据合并操作。本申请提供的技术方案，能够有效地减少合并操作时所占用的资源。

技术领域

本发明涉及互联网技术领域，特别涉及一种对象存储方法、系统及设备。

背景技术

LSM-Tree(Log-Structured Merge Tree，日志结构的合并树)是为键值对存储方式设计的存储引擎。该存储引擎可以先将最新的数据驻留在内存中，等到内存中积累到足够多的数据之后，再使用归并排序的方式将内存中的数据合并(compact)追加到硬盘的队尾。目前，基于LSM-Tree的数据库有很多，例如可以包括Hbase、RocksDB、LevelDB等。

LSM-Tree数据文件按层分布，层级的数据达到一定量会自动执行合并操作。LSM-Tree在执行合并操作时，需要读取待合并的数据，然后再将合并后的数据写入新的文件中，随着数据量的增加，合并操作所占用的IO(输入输出)资源越多，对正常业务的影响也会越来越大。

发明内容

本申请的目的在于提供一种对象存储方法、系统及设备，能够有效地减少合并操作时所占用的资源。

为实现上述目的，本申请一方面提供一种对象存储方法，所述方法应用于对象存储设备中，所述对象存储设备中包括默认列簇和多个扩展列簇，所述方法包括：接收对象存储网关发来的数据写入请求，所述数据写入请求中包括待写入的键值对数据和所述键值对数据对应的列簇标识；若在所述多个扩展列簇中包含具备所述列簇标识的目标扩展列簇，在所述默认列簇中记录所述键值对数据的映射数据，并将所述键值对数据写入所述目标扩展列簇中；其中，在所述多个扩展列簇中，只有当前正在执行数据写入的扩展列簇进行数据合并操作。

为实现上述目的，本申请另一方面还提供一种对象存储系统，所述对象存储系统应用于对象存储设备中，所述对象存储设备中包括默认列簇和多个扩展列簇，所述对象存储系统包括：请求接收单元，用于接收对象存储网关发来的数据写入请求，所述数据写入请求中包括待写入的键值对数据和所述键值对数据对应的列簇标识；数据写入单元，用于若在所述多个扩展列簇中包含具备所述列簇标识的目标扩展列簇，在所述默认列簇中记录所述键值对数据的映射数据，并将所述键值对数据写入所述目标扩展列簇中；其中，在所述多个扩展列簇中，只有当前正在执行数据写入的扩展列簇进行数据合并操作。

为实现上述目的，本申请另一方面还提供一种对象存储设备，所述对象存储设备包括存储器和处理器，所述存储器用于存储计算机程序，所述计算机程序被所述处理器执行时，实现上述的对象存储方法。

由上可见，本申请一个或者多个实施方式提供的技术方案，在对象存储设备中，除了可以包含默认列簇(colunm family)，还可以包含多个扩展列簇。在接收到用户的数据写入请求时，可以识别其中待写入的键值对数据和对应的列簇标识。如果在多个扩展列簇中存在该列簇标识指向的目标扩展列簇，那么该实际的键值对数据可以被写入目标扩展列簇中，而在默认列簇中，可以只记录该键值对数据的映射数据，通过该映射数据便可以在目标扩展列簇中查询到实际的键值对数据。在整个对象存储设备中，只有当前正在执行数据写入的扩展列簇才会进行数据合并操作，而其它已经完成数据写入的扩展列簇就不会进行数据合并操作。这样，通过列簇标识将不同的键值对数据写入不同的扩展列簇中，不仅能够与当前的默认列簇兼容，同时还能够避免对所有写入的数据都同时进行合并操作，从而极大地降低了数据合并时所占用的系统资源，提高了系统整体的稳定性。

附图说明