[发明专利]基于可视化配置的日志数据转换方法及系统

权利要求书

1.一种基于可视化配置的日志数据转换方法，其特征在于，所述方法包括：

获取待转换日志文件，构建可视化配置规则数据库；

将待转换日志文件通过不同的文本读取软件打开，提取待识别文本，根据待识别文本确定有效日志文本；

对有效日志文本进行字符提取和文字提取，构建可视化文本模型；

根据可视化文本模型检索可视化配置规则数据库，调取对应的文本转换规则，对有效日志文本进行转换，得到结构化日志文本；

所述对有效日志文本进行字符提取和文字提取，构建可视化文本模型的步骤，具体包括：

对有效日志文本进行字符提取和文字提取，得到待分析词组和待分析字符串；

根据待分析词组和待分析字符串查询预设的关键字数据库，得到各个有效日志文本对应的有效关键字；

调取预设的空白模型，根据有效关键字对空白模型进行填充，得到可视化文本模型，所述可视化文本模型为由多个单元格组成的图像，每一个单元格对应一个关键字，单元格通过两种颜色进行标记；

对有效日志文本进行字符提取和文字提取，其中字符包括英文字母、常见符号、特殊符号以及汉字，通过常见符号和特殊符号对有效日志文本中的文本进行划分，得到待分析词组和待分析字符串，待分析词组为汉字词组，待分析字符串则为英文词组；根据待分析词组和待分析字符串查询预设的关键字数据库，在关键字数据库中，对所有类型格式的日志文件会使用到的文本关键字进行记录，当有效日志文本中存在与该关键字数据库中关键字重合的词组时，对其进行记录，从而得到有效日志文本对应的有效关键字；调取预设的空白模型，空白模型为由多个空白单元格组成得以预设尺寸的空白像素矩阵，每一个空白像素对应关键字数据库中的一个关键字，且空白模型中各个像素的位置是固定的，进而根据有效关键字对空白模型进行填充，对所有有效关键字进行识别之后，得到可视化文本模型。

2.根据权利要求1所述的基于可视化配置的日志数据转换方法，其特征在于，所述将待转换日志文件通过不同的文本读取软件打开，提取待识别文本，根据待识别文本确定有效日志文本的步骤，具体包括：

将待转换日志文件通过不同的文本读取软件打开，对文本读取软件显示的文本进行复制，得到待识别文本；

从待识别文本中随机截取多个文本段落，对每个文本段落进行字符统计，得到字符统计结果，所述字符统计结果包含汉字统计结果和英文字母统计结果；

根据汉字统计结果和英文字母统计结果从待识别文本中筛选得到有效日志文本。

3.根据权利要求1所述的基于可视化配置的日志数据转换方法，其特征在于，所述根据可视化文本模型检索可视化配置规则数据库，调取对应的文本转换规则，对有效日志文本进行转换，得到结构化日志文本的步骤，具体包括：

查询可视化配置规则数据库，调取其中所有的标准模型；

计算标准模型与可视化文本模型之间的匹配度，根据匹配度对标准模型进行排序，选择匹配度最高的标准模型；

查询该标准模型对应的文本转换规则，对有效日志文本进行转换，得到结构化日志文本。

4.根据权利要求1所述的基于可视化配置的日志数据转换方法，其特征在于，所述对有效日志文本进行字符提取和文字提取的步骤中，对预设字符之间的文本和字符进行提取。

5.根据权利要求3所述的基于可视化配置的日志数据转换方法，其特征在于，所述匹配度为可视化文本模型对应的图像与标准模型对应的图像的像素重合率。