[发明专利]日志处理方法、装置及存储介质

说明书

本发明的实施例提供了一种日志处理方法、装置及存储介质，涉及数据处理技术领域，本实施例提供的日志处理方法，通过获取原始日志，按照预设定的分隔符对所述原始日志进行拆分及重组，生成多个单一标签信息；根据预设定的维度信息对多个所述单一标签信息进行查询，以得到查询结果，所述查询结果包括所述维度信息对应的所述单一标签信息的数量通过对原始日志进行拆分，重组，形成多个单一标签信息，将多个一对多的数据类型转换为多个一对一的数据类型，简化了数据类型，在对用户日志进行具体分析的时候，可以直接按照设定的维度进行查询整理，有助于提高数据处理分析的效率。

技术领域

本发明涉及数据处理技术领域，具体而言，涉及一种日志处理方法、装置及存储介质。

背景技术

随着信息技术以及通讯技术的快速发展，使得各种应用软件广泛应用与推广，收集用户的数据日志与分析用户的行为成为了必要。

针对不同的应用软件与系统，现阶段的解决方案只是解决用户的基础信息的收集，如简单使用记录、应用软件的访问量、访问次数、兴趣爱好等生成日志，针对手机的用户日志进行简单的分析，但现有技术面对海量的用户日志数据的分析处理方法较为繁琐，多个数据交叉混叠存储，当数据较多时处理效率低。

发明内容

本发明的目的在于提供了一种日志处理方法、装置及存储介质，以对手机的用户数据进行快速地实现对数据的统计分析，提高处理效率。

本发明采用的技术方案如下

第一方面，本发明实施例提供一种日志处理方法，所述方法包括：

获取原始日志，所述原始日志包括多个用户身份信息以及所述用户身份信息与多个类型标签的对应关系；

按照预设定的分隔符对所述原始日志进行拆分及重组，生成多个单一标签信息；所述单一标签信息包括一个所述用户身份信息与一个类型标签的对应关系；

根据预设定的维度信息对多个所述单一标签信息进行查询，以得到查询结果，所述查询结果包括所述维度信息对应的所述单一标签信息的数量。

在可选的实施方式中，按照预设定的分隔符对所述原始日志进行拆分及重组，生成多个单一标签信息的步骤包括：

依据所述用户身份信息进行对所述原始日志初步分割得到中间日志，所述中间日志包括一个所述用户身份信息与多个类型标签的对应关系；

按照预设的分隔符对所述中间日志进行分割，得到用户身份信息与多个类型标签；

将所述用户身份信息分别与所述多个类型标签逐一进行组合生成多个单一标签信息。

在可选的实施方式中，根据预设定的维度信息对多个所述单一标签信息进行查询，以得到查询结果的步骤之后，所述方法还包括：

将所述中间日志及所述单一标签信息删除。

在可选的实施方式中，所述根据预设定的维度信息对多个所述单一标签信息进行查询，以得到查询结果步骤包括：

读取第一预设数量个数据块，每个数据块包括第二预设数量个所述单一标签信息；

分别根据每一个数据块内的单一标签信息按照预设维度进行查询，生成初步结果，所述初步结果包括该数据块内查询到的所述预设维度对应的所述单一标签信息数量；

将多个数据块对应的多个初步结果进行分类统计，以得到所述查询结果。

在可选的实施方式中，根据预设定的维度信息对多个所述单一标签信息进行查询之前，所述日志处理方法还包括：

获取查询指令，所述查询指令包括预设定的维度信息，所述维度信息为所述多个标签信息中的至少一个。