[发明专利]一种基于键值数据库的日志处理方法及系统

说明书

技术领域

本申请涉及云存储领域，特别涉及一种基于键值数据库的日志处理方法及系统。

背景技术

随着技术的发展，人们对云存储系统日志处理的方法越来越关注。

现有的云存储系统一般采用一个单独的磁盘分区，或者采用一个单独的磁盘文件存放日志，该磁盘分区或者磁盘文件时可以被循环地、覆盖地写入的，但是每次日志写入都必须以直接IO的形式固化到磁盘，极大地影响了云存储系统的写入带宽、写入延时和IOPS等性能指标。

因此，如何有效的进行云存储系统的日志处理，提高日志写入的性能是本领域技术人员目前需要解决的技术问题。

发明内容

本申请所要解决的技术问题是提供一种基于键值数据库的日志处理方法及系统，解决了现有技术中每次日志写入都必须以直接IO的形式固化到磁盘，极大地影响了云存储系统的写入带宽、写入延时和IOPS等性能指标的问题。

其具体方案如下：

一种基于键值数据库的日志处理方法，该方法包括：

接收写请求操作的指令，为所述写请求操作分配序号，所述写请求操作的指令中包括所述写请求操作的内容；

将所述写请求操作的指令转换为键值记录，其中，所述键值记录中的键为所述为写请求操作分配的序号，所述键值记录中的值为所述写请求操作的内容；

将所述写请求操作的指令转换成的键值记录保存到键值数据库中。

上述的方法，还包括：

将所述写请求操作应用并固化到云存储系统中。

上述的方法，还包括：

从所述键值数据库中删除与应用并固化到云存储系统中的写请求操作相对应的键值记录。

上述的方法，当云存储系统出现故障意外终止，并重启时，还包括：

按照顺序读取所述键值数据库中的所有键值记录；

提取每条所述键值记录中的写请求操作的内容；

将所述写请求操作的内容应用并固化到云存储系统中。

上述的方法，还包括：

从键值数据库中删除与应用并固化到云存储系统中的写请求操作的内容相对应的键值记录。

一种基于键值数据库的日志处理系统，该系统包括：

接收单元，用于接收写请求操作的指令，所述写请求操作的指令中包括所述写请求操作的序号以及所述写请求操作的内容；

转换单元，用于将所述写请求操作的指令转换为键值记录，其中，所述键值记录中的键为所述写请求操作的序号，所述键值记录中的值为所述写请求操作的内容；

保存单元，用于将所述写请求操作的指令转换成的键值记录保存到键值数据库中。

上述的系统，还包括：

第一应用单元，用于将所述写请求操作应用并固化到云存储系统中。

上述的系统，还包括：

第一删除单元，用于从所述键值数据库中删除与应用并固化到云存储系统中的写请求操作相对应的键值记录。

上述的系统，当云存储系统出现故障意外终止，并重启时，还包括：

读取单元，用于按照顺序读取所述键值数据库中的所有键值记录；

提取单元，用于提取每条所述键值记录中的写请求操作的内容；

第二应用单元，用于将所述写请求操作的内容应用并固化到云存储系统中。

上述的系统，还包括：

第二删除单元，用于从键值数据库中删除与应用并固化到云存储系统中的写请求操作的内容相对应的键值记录。

本申请提供的一种基于键值数据库的日志处理方法中，首先，接收写请求操作的指令，为所述写请求操作分配序号，所述写请求操作的指令中包括所述写请求操作的内容；然后，将所述写请求操作的指令转换为键值记录，其中，所述键值记录中的键为所述为写请求操作分配的序号，所述键值记录中的值为所述写请求操作的内容；最后，将所述写请求操作的指令转换成的键值记录保存到键值数据库中。本申请中将每个写请求操作的日志以键值记录的形式保存在键值数据库中，由于键值数据库是一种轻量级的非关系型数据库，在键值数据库中，所有的数据都按照键值对的形式进行组织、索引和存储，能够有效的减少读写磁盘的次数，拥有更好的读写性能，因此，本申请中基于键值数据库的日志处理方法，可以有效的减少因记录日志而导致的磁盘写入次数，大大提升了日志写入的性能。

附图说明