[发明专利]一种日志分析系统、方法及装置

权利要求书

1.一种日志分析系统，其特征在于，所述系统包括采集模块、存储模块和分析模块；

所述采集模块，用于获取表征日志内容的日志变量，对所述日志变量进行格式化，得到格式化后的日志数据，将所述日志数据传输至所述存储模块；

所述存储模块，用于为所述日志数据建立时间标签，将带有时间标签的日志数据存储至时序数据库中；

所述分析模块，用于基于所述时序数据库，查询得到预设时间段内的日志数据，将所述预设时间段内的日志数据存入分析数据库中，以便于对所述分析数据库中的日志数据进行分析。

2.根据权利要求1所述的系统，其特征在于，使用lua-resty-logger-socket模块将所述日志数据传输至所述存储模块。

3.根据权利要求1所述的系统，其特征在于，所述分析模块还用于，将所述分析数据库中的日志数据进行可视化展示。

4.根据权利要求3所述的系统，其特征在于，使用采用数据可视化工具grafana对所述日志数据进行可视化展示。

5.一种日志分析方法，其特征在于，所述方法包括：

获取表征日志内容的日志变量；

对所述日志变量进行格式化，得到格式化后的日志数据；

为所述日志数据建立时间标签，将带有时间标签的日志数据存储至时序数据库中；

基于所述时序数据库，查询得到预设时间段内的日志数据；

将所述预设时间段内的日志数据存入分析数据库中，以便于对所述分析数据库中的日志数据进行分析。

6.根据权利要求5所述的方法，其特征在于，使用Nginx三方模块lua-nginx-module通过LuaAPI获取表征日志内容的日志变量。

7.根据权利要求5所述的方法，其特征在于，所述方法还包括：

根据业务需求，从所述日志变量中获取符合业务需求的目标日志变量；

相应的，对所目标日志变量进行格式化，得到格式化后的日志数据。

8.根据权利要求7所述的方法，其特征在于，所述业务需求包括统计当天访问nginx的次数、最活跃的前n个IP、访问最频繁的前n个url、各网页状态码数据中的至少一种。

9.根据权利要求5所述的方法，其特征在于，所述时序数据库通过InfluxDB实现。

10.根据权利要求8所述的方法，其特征在于，所述基于所述时序数据库，查询得到预设时间段内的日志数据包括：使用InfluxDB提供的连续查询功能查询得到预设时间段内的日志数据。

11.根据权利要求5所述的方法，其特征在于，所述方法还包括：

将所述分析数据库中的日志数据进行可视化展示。

12.根据权利要求11所述的方法，其特征在于，使用采用数据可视化工具grafana对所述日志数据进行可视化展示。

13.一种日志分析装置，其特征在于，所述装置包括：

获取模块，用于获取表征日志内容的日志变量；

格式化模块，用于对所述日志变量进行格式化，得到格式化后的日志数据；

存储模块，用于为所述日志数据建立时间标签，将带有时间标签的日志数据存储至时序数据库中；

查询模块，用于基于所述时序数据库，查询得到预设时间段内的日志数据；

分析模块，用于将所述预设时间段内的日志数据存入分析数据库中，以便于对所述分析数据库中的日志数据进行分析。