[发明专利]一种日志数据的处理方法和装置

说明书

本发明涉及一种日志数据的处理方法和装置，该方法包括：接收终端设备发来的日志数据；其中，所述日志数据携带有该终端设备的IP地址；确定所述日志数据携带的IP地址是否为目标IP地址，如果是，则将该日志数据确定为合法日志数据；根据所述合法日志数据携带的IP地址，确定与所述合法日志数据对应的至少一个日志模板；利用确定出的至少一个日志模板对所述合法日志数据进行匹配解析。本发明的方案能够提高日志服务器对日志数据的解析速度。

技术领域

本发明涉及计算机技术领域，尤其涉及日志数据的处理方法和装置。

背景技术

在工控产品领域，各个厂商都有自己的系列产品，但是在此领域为重中之重的日志格式却没有一项统一的标准，这就导致不同的厂商有自己不同的标准。在接入其它厂商的产品时，每一次都需要对该产品进行功能开发，延长了产品的开发周期并造成了功能模块的严重耦合。

在需要对其它厂商的工控设备进行接入时候，通常采用日志模板技术，该技术的实现具体是预先定义日志模板，终端采集到数据之后，将日志数据与所有的日志模板进行数据匹配，若匹配成功则使用该模板对日志进行格式化并持久化存储。然而，日志模板技术虽然可以简化开发过程，但随着日志模板的日益增多，每一条日志数据都需要对所有的日志模板进行数据匹配，直到匹配到正确的日志模板。如此，在大数据量的采集中，可能会使日志服务器对日志数据的解析速度降低。

因此，针对以上不足，需要提供一种日志数据的处理方法和装置。

发明内容

本发明要解决的技术问题在于日志服务器对日志数据的解析速度降低，针对现有技术中的缺陷，提供一种日志数据的处理方法和装置。

为了解决上述技术问题，本发明提供了一种日志数据的处理方法，包括：

接收终端设备发来的日志数据；其中，所述日志数据携带有该终端设备的IP地址；

确定所述日志数据携带的IP地址是否为目标IP地址，如果是，则将该日志数据确定为合法日志数据；

根据所述合法日志数据携带的IP地址，确定与所述合法日志数据对应的至少一个日志模板；

利用确定出的至少一个日志模板对所述合法日志数据进行匹配解析。

在一种可能的实现方式中，所述目标IP地址是通过如下步骤确定的：

获取已经注册的终端设备的唯一标识信息；其中，所述唯一标识信息包括IP地址；

根据所述唯一标识信息包括的IP地址，确定与该唯一标识信息对应的终端设备是否受信任；

如果受信任，则将该终端设备的IP地址确定为目标IP地址。

在一种可能的实现方式中，所述确定所述日志数据携带的IP地址是否为目标IP地址，包括：

将受信任的终端设备的IP地址进行哈希计算，得到目标IP地址哈希值；

将所述日志数据携带的IP地址进行哈希计算，得到与所述日志数据对应的待比较IP地址哈希值；

确定所述待比较IP地址哈希值是否为所述目标IP地址哈希值。

在一种可能的实现方式中，所述对用于存储协议规则的内存进行初始化，得到预设数量的规则分组，包括：

根据预设的协议规则类型，对用于存储协议规则的内存进行初始化，得到预设数量的规则分组；其中，每一个规则分组对应至少一个协议规则类型，不同的规则分组所对应的协议规则类型不同。

在一种可能的实现方式中，所述利用确定出的至少一个日志模板对所述合法日志数据进行匹配解析，包括：

对确定出的至少一个日志模板进行降序排列；