[发明专利]一种日志数据处理方法和装置

说明书

技术领域

本发明涉及数据处理领域，特别涉及一种日志数据处理方法和装置。

背景技术

计算机设备、操作系统和应用程序在运行过程中都会产生许多日志数据，每一行日志可能会记载着日期、时间、使用者及动作等相关操作的描述，用户可以通过查看并处理日志数据得知计算机设备、操作系统和应用程序的具体运行状况。然而日志数据数量大、处理方式多样，对不同类型、不同内容的数据需要采用不同的方式进行处理，比较繁琐。

例如，某网站的管理员需要处理一批包含服务器主机日志、网站运行日志的日志数据，其中服务器主机日志包含多个服务器主机各自生成的日志，需要按主机名称进行分类处理；网站运行日志又包括用户登录日志和用户登出日志等。如何高效地对日志数据进行分类，并根据每个分类按不同的规则进行日志数据的处理是需要解决的问题。

发明内容

鉴于上述问题，提出了本发明以便提供一种克服上述问题或者至少部分地解决上述问题的日志数据处理方法和装置。

依据本发明的一个方面，提供了一种日志数据处理方法，包括：提供可视化的规则编辑界面；接收用户通过所述规则编辑界面输入的规则编辑命令，依据规则编辑命令形成相应的规则，将该规则保存到规则库中；将日志数据与规则库中的规则进行匹配，如果存在匹配项则生成相应的报警信息。

可选地，所述依据规则编辑命令形成相应的规则包括如下中一种或多种：生成新规则；修改原有的规则；删除原有的规则。

可选地，该方法进一步包括：在所述规则编辑界面上提供日志分类选择项；接收用户通过所述规则编辑界面输入的规则编辑命令的同时，接收用户在所述规则编辑界面上选择的日志分类信息；所述将该规则保存到规则库中包括：将该规则按照该对应的日志分类信息保存的规则库中的相应的日志类别规则库中。

可选地，所述将日志数据与规则库中的规则进行匹配包括：将该日志数据进行分类；将该日志数据与规则库中的相应日志类别规则库中的规则进行匹配。

可选地，该方法进一步包括：在所述规则编辑界面上提供报警级别选项，接收用户通过所述规则编辑界面输入的规则编辑命令的同时，接收用户在所述规则编辑界面上选择的报警级别信息；所述将该规则保存到规则库中包括：将该规则与对应报警级别信息一同保存到规则库中。

可选地，所述如果存在匹配项则生成相应的报警信息包括：根据匹配项中的报警级别信息生成相应级别的报警的信息。

可选地，该方法进一步包括：预设不同级别的报警渠道；将所述报警信息依据其报警级别，通过相应级别的报警渠道发送出去。

可选地，所述规则为针对JSON格式数据的指定一个或多个字段的规则；该方法在将日志数据与规则库中的规则进行匹配之前进一步包括：将日志数据转换为JSON格式数据；所述将日志数据与规则库中的规则进行匹配包括：将日志数据对应的JSON格式数据的指定一个或多个字段与规则库中的规则进行匹配。

可选地，该方法进一步包括：在所述规则编辑界面上提供规则类别选项，接收用户通过所述规则编辑界面输入的规则编辑命令的同时，接收用户在所述规则编辑界面上选择的规则类别选项信息；其中，所述规则类别选项中包括第一类别规则和第二类别规则；所述规则库包括：第一类规则库和第二类规则库。

所述将该规则保存到规则库中包括：将该规则依据其对应的规则类别选项信息保存到第一类规则库或第二类规则库中。

可选地，所述将日志数据与规则库中的规则进行匹配包括：实时获取产生的日志数据，将实时获取的所述日志数据与第一类规则库中的规则进行匹配；将实时获取的所述日志数据存入日志数据库中；分析日志数据库中的日志数据，判断是否存在与第二类规则库中的规则匹配的情况。

依据本发明的另一方面，提供了一种日志数据处理装置，包括：

编辑界面提供单元，适于提供可视化的规则编辑界面；接收单元，适于接收用户通过所述规则编辑界面输入的规则编辑命令，依据规则编辑命令形成相应的规则，将该规则保存到规则库中；存储单元，适于保存规则库；匹配处理单元，适于将日志数据与规则库中的规则进行匹配，如果存在匹配项则生成相应的报警信息。

可选地，所述接收单元，适于依据规则编辑命令执行如下中一种或多种操作：生成新规则；修改原有的规则；删除原有的规则。

可选地，所述编辑界面提供单元，还适于在所述规则编辑界面上提供日志分类选择项；所述接收单元，适于在接收用户通过所述规则编辑界面输入的规则编辑命令的同时，接收用户在所述规则编辑界面上选择的日志分类信息，并将该规则按照该对应的日志分类信息保存的规则库中的相应的日志类别规则库中。