[发明专利]一种日志数据预处理方法、装置、电子设备和存储介质

权利要求书

1.一种日志数据预处理方法，其特征在于，包括：

以数字键相同的行相邻为原则将日志数据的列表中的每一行的日志数据进行排序；

依次遍历所述日志数据的列表；

确定所述日志数据的列表中每一行的日志数据是否在存储器数据结构中存在；

若确定某一行的日志数据在所述存储器数据结构中不存在；

将所述行的日志数据的数据键添加至所述存储器数据结构中，所述数据键对应的数字值计为一；

若确定某一行的日志数据在所述存储器数据结构中已存在；则把所述数据键对应的数字值加一；

若确定所述某一行的日志数据与对应的下一行的日志数据不相同，将所述行的日志数据对应的存储器数据结构中的数据键和所述数据键对应的数字值保存至目标表中，然后将所述存储器数据结构中的数据键和所述数据键对应的数字值删除。

2.根据权利要求1所述的数据预处理方法，其特征在于，所述数字值位于所述数字键的后面。

3.一种日志数据预处理装置，其特征在于，包括：

排序模块：用于以数字键相同的行相邻为原则将日志数据的列表中的每一行的日志数据进行排序；

遍历模块：用于依次遍历所述日志数据的列表；

确定模块：用于确定所述日志数据的列表中每一行的日志数据是否在存储器数据结构中存在；

计数模块：用于若确定某一行的日志数据在所述存储器数据结构中不存在；

将所述行的日志数据的数据键添加至所述存储器数据结构中，所述数据键对应的数字值计为一；

加法模块：用于若确定某一行的日志数据在所述存储器数据结构中已存在；则把所述数据键对应的数字值加一；

若确定所述某一行的日志数据与对应的下一行的日志数据不相同，将所述行的日志数据对应的存储器数据结构中的数据键和所述数据键对应的数字值保存至目标表中，然后将所述存储器数据结构中的数据键和所述数据键对应的数字值删除。

4.一种电子设备，其特征在于，包括：处理器和存储器；

所述处理器通过调用所述存储器存储的程序或指令，用于执行如权利要求1至2任一项所述方法的步骤。

5.一种计算机可读存储介质，其特征在于，所述计算机可读存储介质存储程序或指令，所述程序或指令使计算机执行如权利要求1至2任一项所述方法的步骤。