[发明专利]一种日志处理方法和装置在审
申请号: | 202110528610.9 | 申请日: | 2021-05-14 |
公开(公告)号: | CN113157659A | 公开(公告)日: | 2021-07-23 |
发明(设计)人: | 杨简闻 | 申请(专利权)人: | 中国建设银行股份有限公司 |
主分类号: | G06F16/18 | 分类号: | G06F16/18;G06F9/54;G06F21/62 |
代理公司: | 中原信达知识产权代理有限责任公司 11219 | 代理人: | 宗磊;赵迪 |
地址: | 100033 *** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 日志 处理 方法 装置 | ||
1.一种日志处理方法,其特征在于,包括:
采集分布式服务执行业务事件所生成的日志信息,按照设定的日志输出格式,打印所述日志信息;其中,所述日志输出格式的格式字段包括日志标记和所述业务事件的事件信息;
从打印的所述日志信息中筛选出具有设定日志标记的日志信息,得到目标日志信息;
根据所述业务事件的事件类型,对所述目标日志信息的事件信息进行分类处理。
2.根据权利要求1所述的方法,其特征在于,所述事件信息包括事件标识和事件内容;
所述根据所述业务事件的事件类型,对所述目标日志信息的事件信息进行分类处理,包括:
根据所述业务事件的事件类型,确定与所述事件类型对应的事件标识和拆分格式;
从所述目标日志信息中获取所述事件标识对应的事件内容,按照所述拆分格式设置的格式字段,将所述事件内容按列拆分。
3.根据权利要求2所述的方法,其特征在于,所述事件内容包括事件状态;所述方法还包括:
在设定时间段内,统计目标事件标识对应的事件状态为失败的次数,以及所述目标事件标识在所述目标日志信息中出现的总次数;
根据所述次数和所述总次数,计算所述目标事件标识对应的业务事件的报错率;
将所述报错率与设定报错阈值比较,确定所述报错率大于所述报错阈值,将所述目标事件标识对应的业务事件标记为异常事件。
4.根据权利要求2所述的方法,其特征在于,所述业务事件为多个,所述事件内容包括用户标识和事件状态;所述方法还包括:
从多个所述业务事件对应的目标日志信息中,筛选出包含目标用户标识的目标日志信息;其中,多个所述业务事件归属于同一业务;
从筛选出的目标日志信息中,查找所述事件状态为放弃的记录,统计放弃所述业务事件的用户数,以及放弃所述业务的总用户数;
根据所述用户数和所述总用户数,计算当前业务事件对应的用户流失率;
将所述用户流失率与设定流失阈值比较,确定所述用户流失率大于所述流失阈值,将所述当前业务事件标记为异常事件。
5.根据权利要求2所述的方法,其特征在于,所述方法还包括:
根据所述业务事件的事件类型,配置所述事件内容的拆分格式。
6.根据权利要求1至5的任一项所述的方法,其特征在于,所述采集分布式服务执行业务事件所生成的日志信息,包括:
使用Logstack工具,采集分布式服务执行业务事件所生成的原始日志信息;
使用ElasticSearch搜索框架,对所述原始日志信息进行过滤,得到日志信息。
7.根据权利要求6所述的方法,其特征在于,所述方法还包括:
使用Kibana仪表盘,对所述日志信息进行图形化展示。
8.根据权利要求3或4所述的方法,其特征在于,所述分布式服务为微服务;所述方法还包括:
根据设定的关联关系,查找所述异常事件的事件标识对应的微服务标识;其中,所述关联关系用于记录所述微服务标识和所述事件标识之间的对应关系;
根据查找出的微服务标识,对异常微服务进行定位。
9.根据权利要求8所述的方法,其特征在于,所述事件内容包括失败原因;
所述对异常微服务进行定位的步骤之后,所述方法还包括:
将所述异常微服务和对应的失败原因封装到告警信息中,发送所述告警信息。
10.根据权利要求1所述的方法,其特征在于,所述按照设定的日志输出格式,打印所述日志信息的步骤之前,所述方法还包括:
确定所述日志信息中存在敏感数据,根据所述业务事件的事件类型,确定与所述事件类型对应的日志脱敏策略;
按照所述日志脱敏策略对所述日志信息进行脱敏处理。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于中国建设银行股份有限公司,未经中国建设银行股份有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202110528610.9/1.html,转载请声明来源钻瓜专利网。