[发明专利]一种日志索引构建方法及装置

说明书

本申请提供一种日志索引构建方法及装置。日志索引构建方法包括：根据预设的字段组合规则，确定日志文件中至少一个需要创建索引文件的必需字段组合；针对所述日志文件中每条日志记录，执行以下操作：获取所述日志记录中字段的值；将字段的值拼接为所述必需字段组合的值；获取所述日志记录在所述日志文件中的偏移位置；针对每个字段组合的每个不同值创建索引记录，索引记录中还包括所述每个不同值对应的日志记录的偏移位置；将同一字段组合的索引记录，写入所述日志文件的一个索引文件中。应用本申请方案，可以有效地提高日志查找效率。

技术领域

本申请涉及计算机技术领域，特别是涉及一种日志索引构建方法及装置。

背景技术

在计算机中，通常会将操作系统或其他软件运行中发生的事件记录在日志中，日志可以在诸如日常维护系统的运行、诊断软件问题的原因时提供信息。在记录日志时，通常会采用预置的日志格式，即预置需要记录的一个或多个字段，不同事件的每个预置字段的值可能不同。针对某一事件记录的日志，就是由该事件所有预置字段的值组成。例如，将记录某软件操作的日志的字段设置为“时间”和“操作”，则该软件每次执行操作，都会生成一条包括时间值和操作值的日志，而用户需要查看何时执行了某项特定操作时，查找并获取“操作”字段为对应操作值的日志，就可以根据日志内容获取信息。对日志的查找不一定是实时进行的，通常是将日志存储在设备或者网络中，以便需要时进行查找。

现有技术中，通常是根据日志记录产生的时间，将其顺序存储在日志文件中。查找字段的值为特定值的日志记录时，就需要遍历每条日志记录，判断其中该字段的值是否为特定值，显然，这种遍历的查找方式效率很低，尤其是日志较多时，可能会消耗较多的时间和资源。

发明内容

有鉴于此，本申请提供一种日志索引构建方法及装置，技术方案如下：

根据本申请的第一方面，提供一种日志索引构建方法，该方法包括：

根据预设的字段组合规则，确定日志文件中至少一个需要创建索引文件的必需字段组合；

针对所述日志文件中每条日志记录，执行以下操作：

获取所述日志记录中字段的值；

将字段的值拼接为所述必需字段组合的值；

获取所述日志记录在所述日志文件中的偏移位置；

针对每个字段组合的每个不同值创建索引记录，索引记录中还包括所述每个不同值对应的日志记录的偏移位置；

将同一字段组合的索引记录，写入所述日志文件的一个索引文件中。

根据本申请的第二方面，提供一种基于前述日志索引的日志查找方法，该方法包括：

根据查询请求指定的目标字段组合，查找与目标字段组合对应的目标索引文件；

在所述目标索引文件中，查找包括目标值的索引记录；

根据所述包括目标值的索引记录中的偏移位置，获取日志记录；

利用所获取的日志记录响应所述查询请求。

根据本申请的第三方面，提供一种日志索引构建装置，该装置包括：

字段组合确定模块，用于根据预设的字段组合规则，确定日志文件中至少一个需要创建索引文件的必需字段组合；

字段值获取模块，用于针对所述日志文件中每条日志记录，获取所述日志记录中字段的值；

字段值拼接模块，用于将字段值获取模块获取的值，拼接为所述必需字段组合的值；

偏移位置获取模块，用于获取所述每条日志记录在所述日志文件中的偏移位置；