[发明专利]一种日志采集方法及系统在审
申请号: | 201811640957.7 | 申请日: | 2018-12-29 |
公开(公告)号: | CN109766206A | 公开(公告)日: | 2019-05-17 |
发明(设计)人: | 宋瑜辉;陈亮;严永兵 | 申请(专利权)人: | 北京中电普华信息技术有限公司;国网信息通信产业集团有限公司;国家电网有限公司 |
主分类号: | G06F11/07 | 分类号: | G06F11/07 |
代理公司: | 北京集佳知识产权代理有限公司 11227 | 代理人: | 王宝筠 |
地址: | 100192 北京市海*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 日志采集 规则文件 采集数据 中心服务器 写入 采集程序 采集规则 程序更改 日志数据 生成规则 数据解析 客户端 配置的 日志 解析 采集 发送 配置 | ||
1.一种日志采集方法,其特征在于,该方法包括:
配置日志采集规则,生成规则文件;
控制客户端按照所述规则文件,进行日志采集,获得采集数据;
将所述采集数据发送至中心服务器,并控制所述中心服务器按照所述规则文件对所述采集数据进行解析,获得日志数据。
2.根据权利要求1所述的方法,其特征在于,所述配置日志采集规则,生成规则文件,包括:
根据日志采集路径信息、采集格式信息和配置的规则表达式,生成采集规则;
将所述采集规则写入到规则文件中。
3.根据权利要求2所述的方法,其特征在于,所述规则表达式包括日志行规则表达式、排除日志行规则表达式和多行合并规则表达式。
4.根据权利要求3所述的方法,其特征在于,所述控制客户端按照所述规则文件,进行日志采集,获得采集数据,包括:
控制所述客户端加载所述规则文件,并读取所述规则文件,获得采集规则;
根据所述采集规则,逐行读取日志文件,并按照所述规则表达式,对读取到的日志文件进行处理,获得读取数据;
依次遍历所有的采集规则,直至按照所有的采集规则进行数据采集后,获得采集数据。
5.根据权利要求4所述的方法,其特征在于,所述将所述采集数据发送至中心服务器,并控制所述中心服务器按照所述规则文件对所述采集数据进行解析,获得日志数据,包括:
控制所述中心服务器加载所述规则文件;
接收客户端发送的采集数据,并对所述采集数据进行解析,获得解析内容;
遍历所述规则文件中的采集规则对所述解析内容进行处理,获得日志数据,并将所述日志数据进行存储。
6.一种日志采集系统,其特征在于,该系统包括:
配置单元,用于配置日志采集规则,生成规则文件;
采集单元,用于控制客户端按照所述规则文件,进行日志采集,获得采集数据;
解析单元,用于将所述采集数据发送至中心服务器,并控制所述中心服务器按照所述规则文件对所述采集数据进行解析,获得日志数据。
7.根据权利要求6所述的系统,其特征在于,所述配置单元包括:
生成子单元,用于根据日志采集路径信息、采集格式信息和配置的规则表达式,生成采集规则;
写入子单元,用于将所述采集规则写入到规则文件中。
8.根据权利要求7所述的系统,其特征在于,所述规则表达式包括日志行规则表达式、排除日志行规则表达式和多行合并规则表达式。
9.根据权利要求8所述的系统,其特征在于,所述采集单元包括:
第一加载子单元,用于控制所述客户端加载所述规则文件,并读取所述规则文件,获得采集规则;
第一处理子单元,用于根据所述采集规则,逐行读取日志文件,并按照所述规则表达式,对读取到的日志文件进行处理,获得读取数据;
采集子单元,用于依次遍历所有的采集规则,直至按照所有的采集规则进行数据采集后,获得采集数据。
10.根据权利要求9所述的系统,其特征在于,所述解析单元包括:
第二加载子单元,用于控制所述中心服务器加载所述规则文件;
解析子单元,用于接收客户端发送的采集数据,并对所述采集数据进行解析,获得解析内容;
第二处理子单元,用于遍历所述规则文件中的采集规则对所述解析内容进行处理,获得日志数据,并将所述日志数据进行存储。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京中电普华信息技术有限公司;国网信息通信产业集团有限公司;国家电网有限公司,未经北京中电普华信息技术有限公司;国网信息通信产业集团有限公司;国家电网有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201811640957.7/1.html,转载请声明来源钻瓜专利网。