[发明专利]一种日志采集方法及系统

说明书

本发明公开了一种日志采集方法及系统，该方法包括：配置日志采集规则，生成规则文件；控制客户端按照所述规则文件，进行日志采集，获得采集数据；将所述采集数据发送至中心服务器，并控制所述中心服务器按照所述规则文件对所述采集数据进行解析，获得日志数据。本发明通过将配置的日志采集规则写入到规则文件中，可以避免将采集规则直接写入到采集程序中带来的程序更改的繁琐问题，由于日志的采集和数据解析均是基于规则文件进行的，实现了日志采集的简单化，并提高了日志采集的准确性。

技术领域

本发明涉及信息处理技术领域，特别是涉及一种日志采集方法及系统。

背景技术

随着企业信息系统集成与企业财务自动化平台建设的兴起，在电力行业使用信息化软件来提高内部业务的管理效率已经成为共识。电力公司员工报销管理业务系统采用集中部署方式，需要支撑全国多省市分公司的大量用户使用，传统采用的方案为前端部署F5硬件负载均衡，后端部署多台业务服务器来支撑高并发，大量用户访问。这种模式下由于请求业务随机分发到某一台业务服务器上处理，当出现业务故障时，需要登录每一台服务器去查看日志，使用过程较为繁琐，容易出错且开发效率低下。

发明内容

针对于上述问题，本发明提供一种日志采集方法及系统，实现了日志采集过程的简单化，并提高了准确率和开发效率的目的。

为了实现上述目的，本发明提供了如下技术方案：

一种日志采集方法，该方法包括：

配置日志采集规则，生成规则文件；

控制客户端按照所述规则文件，进行日志采集，获得采集数据；

将所述采集数据发送至中心服务器，并控制所述中心服务器按照所述规则文件对所述采集数据进行解析，获得日志数据。

可选地，所述配置日志采集规则，生成规则文件，包括：

根据日志采集路径信息、采集格式信息和配置的规则表达式，生成采集规则；

将所述采集规则写入到规则文件中。

可选地，所述规则表达式包括日志行规则表达式、排除日志行规则表达式和多行合并规则表达式。

可选地，所述控制客户端按照所述规则文件，进行日志采集，获得采集数据，包括：

控制所述客户端加载所述规则文件，并读取所述规则文件，获得采集规则；

根据所述采集规则，逐行读取日志文件，并按照所述规则表达式，对读取到的日志文件进行处理，获得读取数据；

依次遍历所有的采集规则，直至按照所有的采集规则进行数据采集后，获得采集数据。

可选地，所述将所述采集数据发送至中心服务器，并控制所述中心服务器按照所述规则文件对所述采集数据进行解析，获得日志数据，包括：

控制所述中心服务器加载所述规则文件；

接收客户端发送的采集数据，并对所述采集数据进行解析，获得解析内容；

遍历所述规则文件中的采集规则对所述解析内容进行处理，获得日志数据，并将所述日志数据进行存储。

一种日志采集系统，该系统包括：

配置单元，用于配置日志采集规则，生成规则文件；

采集单元，用于控制客户端按照所述规则文件，进行日志采集，获得采集数据；

解析单元，用于将所述采集数据发送至中心服务器，并控制所述中心服务器按照所述规则文件对所述采集数据进行解析，获得日志数据。

可选地，所述配置单元包括：