[发明专利]一种基于分布式架构的云日志采集方法

权利要求书

1.一种基于分布式架构的云日志采集方法，其特征在于，

主要经过环境部署和系统内日志收集过程，自动收集日志并持久化到磁盘，实现实时搜索和分析，并通过系统日志的展示掌握平台的使用情况。

2.根据权利要求1所述的方法，其特征在于，

进一步包括，

环境部署包括：

根据组件的特性，部署Kafka 集群、Elasticsearch 集群、Logstash，每台服务器安装Filebeat 组件，搭建日志系统框架。

3.根据权利要求2所述的方法，其特征在于，

进一步包括，

系统内日志收集过程包括：

自动收集和实时查询分析日志以及第三方日志的快速导入。

4.根据权利要求1所述的方法，其特征在于，

进一步包括，

日志主要包括以下内容：

1）系统服务器自身日志；

2）系统服务器上部署应用的日志；

3）第三方应用的日志；

4）系统服务日志。

5.根据权利要求3所述的方法，其特征在于，

进一步包括，

搭建日志系统框架，主要步骤包括：

1）每台服务器配置Filebeat 要收集的日志路径，设置日志发送到的传输管道Kafka的地址；

2）在Logstash中配置所有日志来源的解析文件，并设置日志的来源以及发送到Elasticsearch集群的地址；

3）启动所有组件，开始收集日志。

6.根据权利要求5所述的方法，其特征在于，

进一步包括，

系统内日志收集过程：

Filebeat 定时扫描要收集的日志文件，将日志发送到日志传输管道Kafka,经Kafka输送到Logstash，按解析文件解析日志，输出日志格式到Elasticsearch集群，最后将日志持久化到磁盘。

7.根据权利要求6所述的方法，其特征在于，

进一步包括，

通过Elasticsearch api 接口查询分析日志，利用Echarts进行界面展示。

8.根据权利要求7所述的方法，其特征在于，

第三方应用日志通过封装的Elasticsearch api接口，将日志直接存储到Elasticsearch。