[发明专利]基于SQL语句的日志查询方法及其应用

说明书

本申请提出了基于SQL语句的日志查询方法及其应用，包括以下步骤：根据应用程序的运行环境配置日志文件的输出配置；根据日志收集方式对日志文件进行收集，该日志收集方式包括日志文件收集、结构化数据库收集及非结构化数据库收集；根据日志收集方式对应转换处理SQL语句后进行查询；对查询结果适配封装并返回。本申请只需使用SQL语句对日志数据进行搜索查询，简化了日志配置，显著降低资源耗费，侵入性弱，并且能够使运维人员快速排查日志并定位到程序出现问题的原因，极大地提高了工作效率。

技术领域

本申请涉及日志搜索查询领域，特别是涉及一种基于SQL语句的日志查询方法及其应用。

背景技术

目前，软件应用程序的日志数据可以用于问题定位、故障排除、监控、取证等多个方面。一般情况下，在软件程序中使用日志插件，运行前配置日志文件格式和输出格式，软件程序运行过程中会通过日志插件不断往日志文件中写入日志数据。当程序遇到故障需要排查日志时需要登录服务器查看日志文件，对于一些隐蔽的问题，需要下载日志文件并使用一些分析工具进行定位排查。

虽然目前为了监控分析应用程序的日志，可以利用很多工具进行日志搜集和分析，例如ELK(Elasticsearch，Logstash和Kibana)，然而通过这种方式进行日志搜集需要安装部署多个中间件，耗费资源，并且需要在软件程序中修改日志配置，侵入性较强。

为此，亟待一种能够使用SQL查询日志文件的方法及其应用，能够在页面使用SQL(Structured Query Language)结构化查询语言对指定日志文件进行查询，根据关键信息编写SQL语句即可快速筛选出需要相关的日志数据。

发明内容

本申请实施例提供了一种基于SQL语句的日志查询方法及其应用，针对目前技术需要安装部署多个中间件，耗费资源，并且需要在软件程序中修改日志配置，侵入性较强的问题。

本发明核心技术主要是统一提供SQL语句的查询方式，支持将SQL语句解析成不同的查询方式，能够有效降低运维人员的门槛，仅需掌握通用的SQL语言即可对数据进行查询，无须关心数据具体的存储方式并掌握其他各种语言和表达式。

第一方面，本申请提供了基于SQL语句的日志查询方法，所述方法包括以下步骤：

根据应用程序的运行环境配置日志文件的输出配置；

根据日志收集方式对日志文件进行收集，该日志收集方式包括日志文件收集、结构化数据库收集及非结构化数据库收集；

根据日志收集方式对应转换处理SQL语句后进行查询；

对查询结果适配封装并返回。

进一步地，若日志收集方式为日志文件收集，则按照SQL标准关键词及语法拆分SQL语句，将通过拆分出的数组转换为正则表达式进行匹配查询。

进一步地，若日志收集方式为结构化数据库收集，则直接采用SQL语句进行查询。

进一步地，若日志收集方式为非结构化数据库收集，则将SQL语句转换适配为对应非结构化数据库的查询API进行查询。

进一步地，输出配置包括日志级别、日志文件存放路径、日志文件命名格式、文件内日志内容格式、总日志文件最大大小、单个日志文件最大大小及日志文件最大保留周期。

进一步地，根据日志收集方式对日志文件进行收集中，依据自定义输出字段配置生成日志文件输出的相关配置的多个收集字段并保存该配置，查询结果以该配置输出。

进一步地，运行环境至少包括运行环境内存和硬盘信息。

第二方面，本申请提供了一种基于SQL语句的日志查询装置，包括：

日志输出单元，用于根据应用程序的运行环境配置日志文件的输出配置；