[发明专利]一种日志采集方法、装置及设备

说明书

本说明书实施例公开了日志采集方法、装置以及设备，所述方法包括：预先设定需要监控的日志目录，对指定的日志文件和日志目录进行监控；根据接收到的日志文件的文件变动事件的类型记录对应的文件信息；其中，文件变动事件的类型包括：文件移除事件、文件移入事件和文件修改事件，文件信息包括：原文件名、新文件名、文件偏移量和cookie；若上述三个事件是基于同一目录中的同一个原日志文件(即，相同的原文件名)发生的，则可知该日志文件进行了日志轮转，进一步地，根据文件偏移量，到新文件名对应的原日志文件中采集日志数据。

技术领域

本说明书涉及计算机技术领域，尤其涉及一种日志采集方法、装置以及设备。

背景技术

在应用系统日志管理中，为了防止单个日志文件过大，应用系统会按照一定的规则对产生的日志文件进行轮转处理。例如，系统的数据库日志dal-digest.log，在轮转时，将原日志文件重命名为dal-digest.log.1，然后生成一个空的dal-digest.log用于记录之后的日志数据。这种日志轮转机制没有固定的轮转规则，例如，可以根据日志文件的大小进行轮转，也可以根据轮转周期进行轮转。此外，轮转后的日志文件重命名的规则也不固定，例如，可以按照时间进行重命名，也可以根据文件按照文件大小进行排序的序号重命名。

在现有技术中，一般是采用定时轮询的方式进行日志采集，需要预先设置待采集的日志文件的目录和文件格式。但是由于日志轮转的规则和日志文件重命名的规则不固定，需要针对不同轮转规则和重命名规则分别设置对应的采集规则。如果在一次日志采集结束后，原来的日志文件有新的日志数据写入，然后发生了日志轮转，那么在下一次定时轮询采集时，日志采集程序将对日志轮转后的新的日志文件进行采集。

基于现有技术，需要能够高效、准确的进行日志采集的方案。

发明内容

本说明书实施例提供日志采集方法、装置以及设备，用于解决以下技术问题：需要能够高效、准确的进行日志采集的方案。

为解决上述技术问题，本说明书实施例是这样实现的：

本说明书实施例提供的一种日志采集方法，包括：

获取日志文件的文件变动事件；

根据所述文件变动事件的类型，记录所述日志文件对应的文件信息，其中，所述文件信息包括：所述日志文件变动前后的文件信息和变动标记信息；

基于所述文件信息，采集所述日志文件的数据。

本说明书实施例提供的一种日志采集装置，包括：

获取模块，获取日志文件的文件变动事件；

记录模块，根据所述文件变动事件的类型，记录对应的所述日志文件的文件信息，其中，所述文件信息包括：所述日志文件变动前后的文件信息和变动标记信息；

采集模块，基于所述文件信息，采集所述日志文件的数据。

本说明书实施例提供的一种电子设备，包括：

至少一个处理器；以及，

与所述至少一个处理器通信连接的存储器；其中，

所述存储器存储有可被所述至少一个处理器执行的指令，所述指令被所述至少一个处理器执行，以使所述至少一个处理器能够：

获取日志文件的文件变动事件；

根据所述文件变动事件的类型，记录所述日志文件对应的文件信息，其中，所述文件信息包括：所述日志文件变动前后的文件信息和变动标记信息；

基于所述文件信息，采集所述日志文件的数据。

本说明书实施例采用的上述至少一个技术方案能够达到以下有益效果：