[发明专利]日志存储方法及装置

权利要求书

1.一种日志存储方法，其特征在于，包括：

采集待存储的日志数据；

将采集的日志数据写入内存文件系统；

对所述内存文件系统中的日志数据进行持久化存储。

2.如权利要求1所述的方法，其特征在于，对所述内存文件系统中的日志数据进行持久化存储，包括：

将所述内存文件系统中的日志数据，上传至日志中心集群。

3.如权利要求2所述的方法，其特征在于，将所述内存文件系统中的日志数据，上传至日志中心集群，包括：

采用异步的方式，将所述内存文件系统中的日志数据，上传至日志中心集群。

4.如权利要求3所述的方法，其特征在于，采用异步的方式，将所述内存文件系统中的日志数据，上传至日志中心集群，包括：

将所述内存文件系统中的日志数据，发送至Kafka队列；

由日志中心集群从所述Kafka队列中读取日志数据并进行持久化存储。

5.如权利要求1所述的方法，其特征在于，对所述内存文件系统中的日志数据进行持久化存储，包括：

根据预先配置的转存周期和存储路径，将所述内存文件系统中的日志数据存储到本地磁盘文件系统。

6.如权利要求1所述的方法，其特征在于，采集待存储的日志数据，包括：

监测日志文件或日志目录中的日志数据是否存在更新；

当日志文件或日志目录中的日志数据存在更新的情况下，读取增量日志数据。

7.如权利要求1所述的方法，其特征在于，在采集待存储的日志数据之后，所述方法还包括：

根据日志存储需求，对采集的日志数据进行预处理。

8.一种日志存储装置，其特征在于，包括：

日志采集模块，用于采集待存储的日志数据；

日志临时存储模块，用于将采集的日志数据写入内存文件系统；

日志持久化存储模块，用于对所述内存文件系统中的日志数据进行持久化存储。

9.如权利要求8所述的装置，其特征在于，所述日志持久化存储模块包括：

第一持久化存储单元，用于将所述内存文件系统中的日志数据，上传至日志中心集群。

10.如权利要求9所述的装置，其特征在于，所述第一持久化存储单元用于采用异步的方式，将所述内存文件系统中的日志数据，上传至日志中心集群。

11.如权利要求10所述的装置，其特征在于，所述第一持久化存储单元还用于将所述内存文件系统中的日志数据，发送至Kafka队列；以及由日志中心集群从所述Kafka队列中读取日志数据并进行持久化存储。

12.如权利要求8所述的装置，其特征在于，所述日志持久化存储模块还包括：

第二持久化存储单元，用于根据预先配置的转存周期和存储路径，将所述内存文件系统中的日志数据存储到本地磁盘文件系统。

13.如权利要求8所述的装置，其特征在于，日志采集模块包括：

日志更新监测单元，用于监测日志文件或日志目录中的日志数据是否存在更新；

增量日志数据读取单元，用于当日志文件或日志目录中的日志数据存在更新的情况下，读取增量日志数据。

14.如权利要求8所述的装置，其特征在于，所述装置还包括：

日志数据预处理模块，用于根据日志存储需求，对采集的日志数据进行预处理。

15.一种计算机设备，包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序，其特征在于，所述处理器执行所述计算机程序时实现权利要求1至7任一项所述日志存储方法。

16.一种计算机可读存储介质，其特征在于，所述计算机可读存储介质存储有执行权利要求1至7任一项所述日志存储方法的计算机程序。