[发明专利]业务日志的处理方法、装置、设备及存储介质在审
申请号: | 202110551959.4 | 申请日: | 2021-05-20 |
公开(公告)号: | CN113157545A | 公开(公告)日: | 2021-07-23 |
发明(设计)人: | 丁云龙;王洪亮;刘欣欣;田福臣;黄佼 | 申请(专利权)人: | 京东方科技集团股份有限公司 |
主分类号: | G06F11/34 | 分类号: | G06F11/34;G06F11/32 |
代理公司: | 北京志霖恒远知识产权代理事务所(普通合伙) 11435 | 代理人: | 郭栋梁 |
地址: | 100015 *** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 业务 日志 处理 方法 装置 设备 存储 介质 | ||
1.一种业务日志的处理方法,其特征在于,所述方法包括:
采集业务系统的日志数据并通过消息分发中间件传输至实时流计算组件,所述日志数据包括至少一种业务级别;
通过所述实时流计算组件对所述日志数据进行预处理,生成与每个所述业务级别对应的日志流并存储至搜索引擎;
根据预设的告警规则,对所述搜索引擎上的日志流进行分析,生成告警推送结果;
基于所述告警推送结果执行对应的处理操作。
2.根据权利要求1所述的方法,其特征在于,通过所述实时流计算组件对所述日志数据进行预处理,生成与每个所述业务级别对应的日志流并存储至搜索引擎,包括:
通过所述实时流计算组件对所述每个业务级别对应的日志数据进行解析过滤处理,得到过滤后的日志数据;
对所述过滤后的日志数据进行脱敏处理,生成与每个所述业务级别对应的日志流;
将每个所述业务级别对应的日志流按照预设存储方式存储至所述搜索引擎。
3.根据权利要求1所述的方法,其特征在于,根据预设的告警规则,对所述搜索引擎上的日志流进行分析,生成告警推送结果,包括:
向所述搜索引擎发送数据查询请求,所述数据查询请求包括日志标识;
接收所述搜索引擎发送的所述日志标识对应的查询结果信息,所述查询结果信息用于指示在第一预设时间内接收到所述日志标识对应的日志流的条数和业务级别;
基于在第一预设时间内接收到所述日志标识对应的日志流的条数和业务级别,按照预设的告警规则生成告警推送结果。
4.根据权利要求3所述的方法,其特征在于,基于在第一预设时间内接收到所述所述业务级别对应的日志流的条数和业务级别,按照预设的告警规则生成告警推送结果,包括:
基于在第一预设时间内接收到所述日志标识对应的日志流的条数和业务级别,确定计数值;
在第二预设时间内累计所述计数值,得到计数值之和,所述第二预设时间大于所述第一预设时间;
当所述计数值之和大于预设阈值时,生成告警推送结果。
5.根据权利要求4所述的方法,其特征在于,基于在第一预设时间内接收到所述日志标识对应的日志流的条数和业务级别,确定计数值,包括:
获取与每个所述业务级别对应的数据维度权重值;
对所述业务级别对应的日志流的条数和对应的数据维度权重值进行加权求和处理,确定计数值。
6.根据权利要求1所述的方法,其特征在于,基于所述告警推送结果执行对应的处理操作,包括:
接收处理操作指令,所述处理操作指令中携带有基于所述告警推送结果确定的处理类型;
响应于所述处理操作指令,执行与所述处理类型对应的处理操作。
7.根据权利要求1所述的方法,其特征在于,采集业务系统的日志数据并通过消息分发中间件传输至实时流计算组件,包括:
采集业务系统的日志数据并统一所述日志数据的数据格式;
确定统一数据格式的日志数据的业务级别;
根据所述业务级别,将对应的日志数据发送至消息分发中间件;
通过所述消息分发中间件将所述日志数据传输至实时流计算组件。
8.一种业务日志的处理装置,其特征在于,所述装置包括:
数据传输模块,用于采集业务系统的日志数据并通过消息分发中间件传输至实时流计算组件,所述日志数据包括至少一种业务级别;
存储模块,用于通过所述实时流计算组件对所述日志数据进行预处理,生成与每个所述业务级别对应的日志流并存储至搜索引擎;
分析模块,用于根据预设的告警规则,对所述搜索引擎上的日志流进行分析,生成告警推送结果;
执行模块,用于基于所述告警推送结果执行对应的处理操作。
9.一种计算机设备,其特征在于,所述计算机设备包括存储器、处理器以及存储在存储器并可在处理器上运行的计算机程序,所述处理器用于执行所述程序时实现如权利要求1-7任一项所述的业务日志的处理方法。
10.一种计算机可读存储介质,其特征在于,其上存储有计算机程序,所述计算机程序用于实现如权利要求1-7中任一项所述的业务日志的处理方法。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于京东方科技集团股份有限公司,未经京东方科技集团股份有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202110551959.4/1.html,转载请声明来源钻瓜专利网。