[发明专利]一种日志数据监控系统及方法在审
申请号: | 201810879515.1 | 申请日: | 2018-08-03 |
公开(公告)号: | CN109144817A | 公开(公告)日: | 2019-01-04 |
发明(设计)人: | 刘凯波;周刚涛;沈哲俊;董凯 | 申请(专利权)人: | 江苏满运软件科技有限公司 |
主分类号: | G06F11/30 | 分类号: | G06F11/30;G06F11/32;G06F11/34;H04L29/08 |
代理公司: | 上海硕力知识产权代理事务所(普通合伙) 31251 | 代理人: | 郭桂峰 |
地址: | 210012 江苏省南京市*** | 国省代码: | 江苏;32 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 降级 日志信息 获取目标 监控系统 日志数据 移动终端 预警条件 自动业务 预设 数据处理模块 数据收集模块 数据预警模块 触发模块 降级系统 目标日志 目标数据 判定目标 判断模块 预警提醒 预警信息 自动触发 页面 判定 筛选 指令 上报 分析 统计 发现 | ||
1.一种日志数据监控系统,其特征在于,包括:
数据收集模块,用于收集各移动终端上报的各日志信息;
数据处理模块,用于对收集的各日志信息进行筛选处理,获取目标日志信息;并对所有目标日志信息进行分析和统计,获取目标数据;
数据预警模块,用于判断所述目标数据是否符合预设的预警条件,并在所述目标数据符合所述预设的预警条件时进行相应的预警提醒。
2.根据权利要求1所述的一种日志数据监控系统,其特征在于,还包括:
降级判断模块,用于当所述数据预警模块判定所述目标数据符合所述预设的预警条件时,进一步判断当前是否已设定自动业务降级处理;
降级触发模块,用于当所述降级判断模块判断当前已设定自动业务降级处理时,向业务降级系统发出业务降级指令。
3.根据权利要求1所述的一种日志数据监控系统,其特征在于,所述数据收集模块包括:
kafka消息订阅子模块,用于根据用户需求,从kafka中订阅各移动终端上报的指定类别的日志信息;
信息接收子模块,用于接收所述Kafka发送的所述指定类别的日志信息。
4.根据权利要求1-3任一项所述的一种日志数据监控系统,其特征在于,还包括:
数据存储模块,用于将所述数据处理模块获取的目标日志信息进行存储;
数据展示模块,用于获取所述数据存储模块存储的所有目标日志信息,按照用户设置的筛选条件进行筛选;并根据筛选的结果,统计及展示出相应的数据图表。
5.根据权利要求4所述的一种日志数据监控系统,其特征在于,所述数据存储模块包括:
数据解析子模块,用于解析所述目标日志信息,并将解析后的目标日志信息的结构体放入创建的消息队列;
调度子模块,用于从工作池中获取一个工作单元,并从所述消息队列中获取一个消息单元;并将所述消息单元交给所述工作单元,便于所述工作单元将所述消息单元放入写入消息队列;
数据写入子模块,用于将所述写入消息队列中的数据放入批量写入请求中;且当所述批量写入请求的请求数量大于预设请求数时,将所述批量写入请求中的数据进行写入存储。
6.一种日志数据监控方法,其特征在于,包括:
收集各移动终端上报的各日志信息;
对收集的各日志信息进行筛选处理,获取目标日志信息;
对所有目标日志信息进行分析和统计,获取目标数据;
判断所述目标数据是否符合预设的预警条件;
当所述目标数据符合所述预设的预警条件时进行相应的预警提醒。
7.根据权利要求6所述的一种日志数据监控方法,其特征在于,还包括:
当判定所述目标数据符合所述预设的预警条件时,进一步判断当前是否已设定自动业务降级处理;
当判定当前已设定自动业务降级处理时,向业务降级系统发出业务降级指令。
8.根据权利要求6所述的一种日志数据监控方法,其特征在于,所述收集各移动终端上报的各日志信息包括:
根据用户需求,从kafka中订阅各移动终端上报的指定类别的日志信息;
接收所述Kafka发送的所述指定类别的日志信息。
9.根据权利要求6-8任一项所述的一种日志数据监控方法,其特征在于,在获取目标日志信息之后还包括:
将所述目标日志信息进行存储;
获取存储的所有目标日志信息,按照用户设置的筛选条件进行筛选;
根据所述筛选的结果,统计并展示出相应的数据图表。
10.根据权利要求9所述的一种日志数据监控方法,其特征在于,所述将所述目标日志信息进行存储包括:
解析所述目标日志信息,并将解析后的目标日志信息的结构体放入创建的消息队列;
从工作池中获取一个工作单元,并从所述消息队列中获取一个消息单元;
将所述消息单元交给所述工作单元,便于所述工作单元将所述消息单元放入写入消息队列;
将所述写入消息队列中的数据放入批量写入请求中;
当所述批量写入请求的请求数量大于预设请求数时,将所述批量写入请求中的数据进行写入存储。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于江苏满运软件科技有限公司,未经江苏满运软件科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201810879515.1/1.html,转载请声明来源钻瓜专利网。