[发明专利]日志的存储方法、装置、电子设备及计算机可读介质

说明书

本公开涉及一种日志的存储方法、装置、电子设备及计算机可读介质，属于大数据技术领域。该方法包括：获取日志模板集合，并根据所述日志模板集合得到日志存储表；将待存储日志与所述日志模板集合中的各个日志模板分别进行匹配，得到所述待存储日志对应的目标日志模板；根据所述目标日志模板提取所述待存储日志中的日志参数，并将所述日志参数以列式存储的方式存储在所述日志存储表中的目标日志模板对应的目标位置。本公开通过将日志转化成日志模板和对应的日志参数，并通过列式存储的方法存储日志参数，可以提高日志的压缩比，减少日志数据存储时的空间占用。

技术领域

本公开涉及大数据技术领域，具体而言，涉及一种日志的存储方法、日志的存储装置、电子设备及计算机可读介质。

背景技术

系统日志是记录系统中硬件、软件和系统问题的信息，同时还可以监视系统中发生的事件。通过日志可以实现很多分析和预测工作，提升系统运维效率。

然而随着时间的推移，系统中存储的日志会越来越多，如果不进行处理，将会占用过量的磁盘空间，带来很大的存储成本。

鉴于此，本领域亟需一种能够有效减少日志数据存储时的空间占用的日志的存储方法。

需要说明的是，在上述背景技术部分公开的信息仅用于加强对本公开的背景的理解，因此可以包括不构成对本领域普通技术人员已知的现有技术的信息。

发明内容

本公开的目的在于提供一种日志的存储方法、日志的存储装置、电子设备及计算机可读介质，进而至少在一定程度上减少日志数据存储时的空间占用。

根据本公开的第一个方面，提供一种日志的存储方法，包括：

获取日志模板集合，并根据所述日志模板集合得到日志存储表；

将待存储日志与所述日志模板集合中的各个日志模板分别进行匹配，得到所述待存储日志对应的目标日志模板；

根据所述目标日志模板提取所述待存储日志中的日志参数，并将所述日志参数以列式存储的方式存储在所述日志存储表中的目标日志模板对应的目标位置。

在本公开的一种示例性实施例中，所述将待存储日志与所述日志模板集合中的各个日志模板分别进行匹配，得到所述待存储日志对应的目标日志模板，包括：

将待存储日志与所述日志模板集合中的各个日志模板分别进行匹配，得到所述待存储日志对应的候选日志模板；

判断所述待存储日志与所述候选日志模板是否完全匹配；

若所述待存储日志与所述候选日志模板完全匹配，则将所述候选日志模板作为所述待存储日志对应的目标日志模板；

若所述待存储日志与所述候选日志模板不完全匹配，则根据所述待存储日志得到所述目标日志模板，并根据所述目标日志模板更新所述日志模板集合。

在本公开的一种示例性实施例中，所述将待存储日志与所述日志模板集合中的各个日志模板分别进行匹配，得到所述待存储日志对应的候选日志模板，包括：

将待存储日志与所述日志模板集合中的各个日志模板分别进行匹配，得到所述待存储日志与各个所述日志模板的匹配度；

根据所述匹配度最高的日志模板得到所述待存储日志对应的候选日志模板。

在本公开的一种示例性实施例中，所述根据所述待存储日志得到所述目标日志模板，包括：

获取所述待存储日志与所述候选日志模板的匹配度，并判断所述匹配度是否大于或等于匹配度阈值；

若所述匹配度大于或等于所述匹配度阈值，则根据所述待存储日志对所述候选日志模板进行字符转换，得到所述目标日志模板；