[发明专利]一种日志数据监控系统及方法

说明书

本发明公开了一种日志数据监控系统，包括：数据收集模块，用于收集各移动终端上报的各日志信息；数据处理模块，用于对收集的各日志信息进行筛选处理，获取目标日志信息；并对所有目标日志信息进行分析和统计，获取目标数据；数据预警模块，用于判断目标数据是否符合预设的预警条件，若符合则进行相应的预警提醒。较佳的，该系统还包括：降级判断模块，用于当判定目标数据符合预设的预警条件时，判断当前是否已设定自动业务降级处理；降级触发模块，用于当判定当前已设定自动业务降级处理时，向业务降级系统发出业务降级指令。通过本发明可以尽早发现移动终端App的错误，发出预警信息给或者自动触发页面降级，从而降低对用户的影响。

技术领域

本发明涉及数据监控处理领域，尤其涉及一种日志数据监控系统及方法。

背景技术

随着网络技术的发展，用户日常使用中也越来越离不开移动终端。比如用户可以通过移动终端的各类APP实现智能家居的控制，或者通过操控相应APP满足购物、社交、娱乐等等需求。然而现有的技术无法实时监测在用户手中的手持设备的问题，一旦在APP使用中出现错误，则需要等待用户的反馈。用户反馈后还需要跟用户沟通、开发人员复现出该问题才可以找到解决的对策。很多时候无法模拟用户的手持设备的数据无法复现出用户的问题。如此，则很难及时发现各设备出现的常见问题，开发人员也无法及时获悉到问题情况，更无法及时提供相应的应对措施，久而久之，大大影响了用户的体验度。

发明内容

为了克服上述技术缺陷，本发明提供一种日志数据监控系统及方法，具体的，本发明的技术方案如下：

一方面，本发明公开了一种日志数据监控系统，包括：数据收集模块，用于收集各移动终端上报的各日志信息；数据处理模块，用于对收集的各日志信息进行筛选处理，获取目标日志信息；并对所有目标日志信息进行分析和统计，获取目标数据；数据预警模块，用于判断所述目标数据是否符合预设的预警条件，并在所述目标数据符合所述预设的预警条件时进行相应的预警提醒。

优选地，所述日志数据监控系统还包括：降级判断模块，用于当所述数据预警模块判定所述目标数据符合所述预设的预警条件时，进一步判断当前是否已设定自动业务降级处理；降级触发模块，用于当所述降级判断模块判断当前已设定自动业务降级处理时，向业务降级系统发出业务降级指令。

优选地，所述数据收集模块包括：kafka消息订阅子模块，用于根据用户需求，从kafka中订阅各移动终端上报的指定类别的日志信息；信息接收子模块，用于接收所述Kafka发送的所述指定类别的日志信息。

优选地，所述日志数据监控系统还包括：数据存储模块，用于将所述数据处理模块获取的目标日志信息进行存储；数据展示模块，用于获取所述数据存储模块存储的所有目标日志信息，按照用户设置的筛选条件进行筛选；并根据筛选的结果，统计及展示出相应的数据图表。

优选地，所述数据存储模块包括：数据解析子模块，用于解析所述目标日志信息，并将解析后的目标日志信息的结构体放入创建的消息队列；调度子模块，用于从工作池中获取一个工作单元，并从所述消息队列中获取一个消息单元；并将所述消息单元交给所述工作单元，便于所述工作单元将所述消息单元放入写入消息队列；数据写入子模块，用于将所述写入消息队列中的数据放入批量写入请求中；且当所述批量写入请求的请求数量大于预设请求数时，将所述批量写入请求中的数据进行写入存储。

另一方面，本发明还公开了一种日志数据监控方法，包括：收集各移动终端上报的各日志信息；对收集的各日志信息进行筛选处理，获取目标日志信息；对所有目标日志信息进行分析和统计，获取目标数据；判断所述目标数据是否符合预设的预警条件；当所述目标数据符合所述预设的预警条件时进行相应的预警提醒。

优选地，所述日志数据监控方法还包括：当判定所述目标数据符合所述预设的预警条件时，进一步判断当前是否已设定自动业务降级处理；当判定当前已设定自动业务降级处理时，向业务降级系统发出业务降级指令。