[发明专利]创建日志模板的方法和装置、日志分析方法

权利要求书

1.一种管理日志模板数据库的方法，包括：

获取并处理待处理日志，其中所述待处理日志包括标识和内容；

根据所述标识，确定日志模板数据库中是否包括与所述标识相对应的日志模板；以及

基于确定结果管理日志模板数据库，

其中所述日志模板数据库中的日志模板是根据创建日志模板的步骤而创建的，

所述创建日志模板的步骤具体包括：

获取并处理至少一个日志，其中每个日志包括所述日志的标识和内容；

将具有相同标识的日志聚类为一组，以形成至少一个日志组；

对每个日志组中日志的内容执行过滤和矩阵化，以获得m×n的内容矩阵，其中m为所述日志组所包括的日志的数量，n为所述日志组的内容中的单词的种类数，m和n为大于或等于1的整数；

针对每个日志组，利用所述内容矩阵确定所述日志组的内容中的单词是常量还是变量；以及

基于针对所述日志组中单词的确定结果，创建与所述日志组对应的日志模板；

其中，所述基于确定结果管理日志模板还包括：

响应于确定所述日志模板数据库中包括对应日志模板，获取针对所述对应日志模板在预定时间段内的核验次数；

将所述核验次数与预设的核验次数阈值进行比较；

响应于所述核验次数小于所述核验次数阈值，基于所述内容创建另一日志模板；

将所述另一日志模板与所述对应日志模板进行匹配，以确定所述另一日志模板与所述对应日志模板是否一致；以及

响应于确定所述另一日志模板与所述对应日志模板一致，使所述对应日志模板的核验次数加1。

2.根据权利要求1所述的方法，其中，所述利用所述内容矩阵确定所述日志组的内容中的单词是常量还是变量包括：

相对于所述日志组中的每个日志，

根据所述内容矩阵计算每个单词的词频-逆向文件频率值TF-IDF；以及

将每个单词的TF-IDF与所述日志的平均TF-IDF值进行比较，其中如果所述单词的TF-IDF大于所述平均TF-IDF值，则所述单词被确定为在所述日志中的常量，否则被确定为在所述日志中的变量；

相对于所述日志组，

统计所述单词被确定为常量的常量确定次数和被确定为变量的变量确定次数；以及

基于所述常量确定次数和所述变量确定次数，确定所述单词是针对所述日志组的常量还是变量。

3.根据权利要求2所述的方法，其中，所述基于所述常量确定次数和所述变量确定次数，确定所述单词是针对所述日志组的常量还是变量包括：

计算所述常量确定次数与所述变量确定次数的比值；

将所述比值与预定阈值进行比较；以及

响应于所述比值大于等于预定阈值，将所述单词确定为针对所述日志组的常量，否则将所述单词确定为针对所述日志组的变量。

4.根据权利要求2所述的方法，其中，所述日志的平均TF-IDF值是通过计算所述日志中的单词的TF-IDF的平均值而得到的。

5.根据权利要求2所述的方法，其中，所述TF-IDF是经标准化的TF-IDF，

其中所述经标准化的TF-IDF是通过相对于内容矩阵所包括的每个向量计算TF-IDF值的欧几里得范数而得到的。

6.根据权利要求1所述的方法，其中，所述创建与所述日志组对应的日志模板包括：将所述日志模板表示为正则匹配字符串。

7.根据权利要求1所述的方法，其中，所述基于确定结果管理日志模板包括：响应于确定所述日志模板数据库中不包括对应日志模板，基于所述内容创建针对所述标识的日志模板。

8.根据权利要求1所述的方法，所述方法还包括：

响应于确定所述另一日志模板与所述对应日志模板不一致，将所述另一日志模板添加到所述日志模板数据库，作为与所述标识相对应的日志模板之一，并将针对所述另一日志模板的核验次数设置为0。