[发明专利]日志文件处理方法及装置

权利要求书

1.一种日志文件处理方法，其特征在于，包括：

当接收到预先设置的配置管理数据库CMBD发送的每个应用系统对应的日志配置信息时，确定预先设置的各个数据维度；

基于每个应用系统对应的日志配置信息，检查每个所述应用系统的各个日志文件是否满足各个所述数据维度，并在确定任意的应用系统的各个日志文件满足各个所述数据维度时，采集该应用系统中的各个日志文件；

读取每个所述日志文件中的日志数据，并检查各个所述日志数据中是否包含敏感字段；

当任意的日志数据中包含敏感字段时，按照预先设置的脱敏规则，对所述日志数据中的敏感字段进行脱敏处理，并将已脱敏的日志数据所属的日志文件设定为第一日志文件；

当任意的日志数据中不含敏感字段时，将所述日志数据所属的日志文件设定为第二日志文件；

确定每个所述第一日志文件及第二日志文件对应的存储策略，并按照每个所述第一日志文件及第二日志文件对应的存储策略，对各个第一日志文件及第二日志文件进行存储，完成各个所述应用系统中各个日志文件的处理过程。

2.根据权利要求1所述的方法，其特征在于，所述基于每个应用系统对应的日志配置信息，检查每个所述应用系统的各个日志文件是否满足各个所述数据维度，并在确定任意的应用系统的各个日志文件满足各个所述数据维度时，采集该应用系统中的各个日志文件，包括：

设置各个所述应用系统对应的日志采集顺序；

基于所述日志采集顺序及每个所述应用系统对应的日志配置信息，依次执行每个所述应用系统对应的日志采集过程，以基于每个所述应用系统对应的日志采集过程，获得每个所述应用系统对应的各个日志文件；

对于每个所述应用系统，所述应用系统对应的日志采集过程，包括：基于所述应用系统对应的配置信息，确定所述应用系统中待采集的各个日志文件对应的日志文件数量、总文件大小、文件传输流量以及传输时间，判断所述应用系统对应的日志采集开关是否处于开启状态；若是，则判断所述日志文件数量是否超出预设的数量阈值、所述总文件大小是否超出预设的容量阈值、所述文件传输流量是否超出预设的流量阈值，以及所述传输时间是否超出预设的时长阈值；若所述日志文件数量未超出预设的数量阈值、所述总文件大小未超出预设的容量阈值、所述文件传输流量未超出预设的流量阈值，以及所述传输时间未超出预设的时长阈值，则采集所述应用系统中的各个日志文件，并结束所述应用系统对应的日志采集过程；若所述日志文件数量超出预设的数量阈值，或，所述总文件大小超出预设的容量阈值，或，所述文件传输流量超出预设的流量阈值，或，所述传输时间超出预设的时长阈值，则结束所述应用系统对应的日志采集过程。

3.根据权利要求2所述的方法，其特征在于，所述应用系统对应的日志采集过程，还包括：

当所述应用系统对应的日志采集过程开始执行时，获取预先设置的应用组件锁；

应用所述应用组件锁，锁定所述应用系统对应的日志采集过程；

当所述应用系统对应的日志采集过程结束时，释放所述应用组件锁。

4.根据权利要求1所述的方法，其特征在于，所述按照预先设置的脱敏规则，对所述日志数据中的敏感字段进行脱敏处理，包括：

提取所述日志数据中的敏感字段；

确定所述敏感字段对应的数据类型；

确定所述数据类型对应的安全等级，及所述安全等级对应的脱敏方式；

基于所述脱敏方式，对所述敏感字段进行脱敏处理。