[发明专利]日志采集文件完整性检测方法、系统、装置及存储介质

说明书

本申请公开了一种日志采集文件完整性检测方法、系统、装置及存储介质。该方法通过获取日志文件信息和日志元数据信息，当日志元数据信息的采集状态标识为异常标识时，判断异常标识是否为预设异常标识；进而判断日志文件信息的行数是否不等于日志元数据信息的行数；进而按照预设维度对日志文件信息和日志元数据信息再次进行比对，从而确定日志文件信息不具有完整性。该系统包括第一获取模块、第二获取模块、第一确定模块、第二确定模块、第三确定模块和第四确定模块。通过使用上述方法，能够对日志采集文件的完整性进行智能检测和问题定位，有利于减少人力成本，提高检测效率。本申请可广泛应用于计算机技术领域内。

技术领域

本申请涉及计算机技术领域，尤其是一种日志采集文件完整性检测方法、系统、装置及存储介质。

背景技术

目前日志数据缺失或其他数据异常通常由用户访问报表数据发现，再反馈至数据开发人员，对日志文件的数据异常情况进行检测和定位。由此可见，对于复杂的业务场景，相关技术中的日志文件完整性检测对于数据缺失问题发现滞后，需要人工参与，时效性欠佳。

发明内容

本申请的目的在于至少一定程度上解决现有技术中存在的技术问题之一。

为此，本申请实施例的一个目的在于提供一种日志采集文件完整性检测方法，该方法能够对日志采集文件的完整性进行智能检测和问题定位，有利于减少人力成本，提高检测效率。

本申请实施例的另一个目的在于提供一种日志采集文件完整性检测系统。

为了达到上述技术目的，本申请实施例所采取的技术方案包括：

一方面，本申请实施例提供了一种日志采集文件完整性检测方法，包括以下步骤：

本申请实施例的一种日志采集文件完整性检测方法，获取日志文件信息；获取日志元数据信息；当所述日志元数据信息的采集状态标识为异常标识，判断所述异常标识是否为预设异常标识；所述预设异常标识用于表征日志的异常类型不属于人工干预的异常；若所述异常标识为预设异常标识，判断所述日志文件信息的行数是否不等于所述日志元数据信息的行数；若所述日志文件信息的行数不等于所述日志元数据信息的行数，按照预设维度获取所述日志文件信息中的第一日志信息，按照所述预设维度获取所述日志元数据信息中的第二日志信息，并判断所述第一日志信息的行数是否不等于所述第二日志信息的行数；若所述第一日志信息的行数不等于所述第二日志信息的行数，确定所述日志文件信息不具有完整性。通过使用上述方法，能够对日志采集文件的完整性进行智能检测和问题定位，有利于减少人力成本，提高检测效率。

另外，根据本申请上述实施例的日志采集文件完整性检测方法，还可以具有以下附加的技术特征：

进一步地，本申请实施例的日志采集文件完整性检测方法，还包括以下步骤；对所述第一日志信息进行重新采集处理，得到具有完整性的日志文件信息。

进一步地，在本申请的一个实施例中，所述对所述第一日志信息进行重新采集处理这一步骤，其具体包括：删除所述第一日志信息，重新采集所述预设维度下的日志文件信息。

进一步地，在本申请的一个实施例中，所述预设维度下的日志文件信息通过以下步骤重新采集：重新采集对应的采集标识为预设标识的日志文件信息。

进一步地，在本申请的一个实施例中，所述获取日志文件信息，包括：累计第一时长；若所述第一时长等于预设时间阈值，获取日志文件信息并重新累计第一时长。

进一步地，在本申请的一个实施例中，所述按照预设维度获取所述日志文件信息中的第一日志信息，包括：按照服务器维度获取所述日志文件信息中的第一日志信息。

进一步地，在本申请的一个实施例中，所述获取日志元数据信息这一步骤后，包括：对所述日志文件信息和所述日志元数据信息进行结构化处理。