[发明专利]一种日志处理方法及系统

权利要求书

1.一种日志处理方法，其特征在于，所述方法包括：

按照日志来源和/或日志格式，对所采集的源日志进行分类，并根据分类结果将源日志传递至相应的处理通道，其中，每一类日志对应一个处理通道；

根据预设的配置文件，在处理通道中对源日志进行处理，获取处理后的目标日志，其中，所述配置文件中至少包括一用于对源日志进行格式化的范式化文件，且所述配置文件与处理通道一一对应；

根据配置文件中的第一规则，将处理后的目标日志分发到不同的目的地址，所述第一规则用于指定分发地址、分发端口以及分发方式。

2.根据权利要求1所述的一种日志处理方法，其特征在于，所述按照日志来源和/或日志格式，对所采集的源日志进行分类，并根据分类结果将源日志传递至相应的处理通道，包括：

按照日志来源，将不同来源的源日志传递至不同的处理通道；和/或，

根据日志格式，将符合准入范式的源日志传递至相应的处理通道，其中，每条处理通道设置一组准入范式，且准入范式中包括多种日志格式。

3.根据权利要求1所述的一种日志处理方法，其特征在于，所述根据预设的配置文件，在处理通道中对源日志进行处理，获取处理后的目标日志，包括：

根据预设的配置文件，在处理通道中对源日志进行格式化，获取格式化后的日志。

4.根据权利要求3所述的一种日志处理方法，其特征在于，根据预设的配置文件，在处理通道中对源日志进行格式化，获取格式化后的日志之后，所述方法还包括：

在处理通道中根据配置文件中的第二规则，将格式化后的日志进行过滤，获取过滤后的日志，所述第二规则用于过滤掉无效日志。

5.根据权利要求4所述的一种日志处理方法，其特征在于，在处理通道中根据配置文件中的第二规则，将格式化后的日志进行过滤，获取过滤后的日志之后，所述方法还包括：

在处理通道中根据配置文件中的第三规则，将过滤后的日志进行归并，获取归并后的日志，所述第三规则用于归并一定时间内的相同日志。

6.根据权利要求5所述的一种日志处理方法，其特征在于，所述第三规则设定的参数包括：待归并日志的时间范围、待归并日志的类型。

7.根据权利要求1-6中任一所述的一种日志处理方法，其特征在于，所述分发方式包括：将目标日志写入文件中或者将目标日志写入MQ中。

8.一种日志处理系统，其特征在于，所述系统包括：

分类模块，用于按照日志来源和/或日志格式，对所采集的源日志进行分类，并根据分类结果将源日志传递至相应的处理通道，其中，每一类日志对应一个处理通道；

处理模块，用于根据预设的配置文件，在处理通道中对源日志进行处理，获取处理后的目标日志，其中，所述配置文件中至少包括一用于对源日志进行格式化的范式化文件，且所述配置文件与处理通道一一对应；

分发模块，用于根据配置文件中的第一规则，将处理后的目标日志分发到不同的目的地址，所述第一规则用于指定分发地址、分发端口以及分发方式。

9.根据权利要求8所述的一种日志处理系统，其特征在于，所述处理模块包括：格式化单元，用于根据预设的配置文件，在处理通道中对源日志进行格式化，获取格式化后的日志。

10.根据权利要求9所述的一种日志处理系统，其特征在于，所述处理模块中还包括：

过滤单元，用于在处理通道中根据配置文件中的第二规则，将格式化后的日志进行过滤，获取过滤后的日志，所述第二规则用于过滤掉无效日志；

归并单元，用于在处理通道中根据配置文件中的第三规则，将过滤后的日志进行归并，获取归并后的日志，所述第三规则用于归并一定时间内的相同日志。