[发明专利]日志处理系统和方法、存储介质及电子装置

说明书

本发明公开了一种日志处理系统和方法、存储介质及电子装置，其中，上述日志处理系统包括：包括：日志管理器、日志接收模块、日志派发模块、日志保存模块；日志管理器，用于保存用于处理日志信息的规则信息；日志接收模块，与日志管理器连接，用于接收日志管理器发送的消息中间件的第一标识信息，并根据第一标识信息向消息中间件获取日志信息；日志派发模块，用于根据日志信息的处理方法、日志信息的处理速度对日志信息进行清理，以得到处理后的日志信息，以及接收日志管理器发送的日志信息对应的数据存储系统的第二标识信息；日志保存模块，用于接收日志派发模块发送的处理后的日志信息和数据存储系统的第二标识信息。

技术领域

本发明涉及通信领域，具体而言，涉及一种日志处理系统和方法、存储介质及电子装置。

背景技术

伴随软件在日常工作，生活中变的越来越重要，软件本身也变的越来越复杂度，开发稳定，高效运行的软件也越来越有挑战，日志作为重要的分析工具，贯穿了软件开发与运行的全生命周期，从最简单的测试程序到复杂的分布式应用，从客户端(页面、App)到服务端，从系统内核态到用户态，日志无处不在。

开发人员通常需要通过日志分析程序问题，记录程序状态，分布式开发阶段，日志的功能在定位问题的基础上增加了业务分析的功能，业务系统会通常会记录业务相关的日志用于后续分析系统的使用情况，随着对于此类日志不断的积累产生了大数据相关的功能软件。

近年来随着以Kubernetes为代表的云原生技术的崛起，应用上云是大势所趋，随之而来的也为日志处理增加了新的挑战，如海量日志如何记录，如何存储，如何检索，如何快速定位问题等。

相关技术中，流行的日志处理方案主要是某些云平台提供商，例如，阿里云日志统一分析平台；华为云日志分析处理平台，因统一处理管理日志的全生命周期包括数据存储，对于有保密要求与敏感度较高的数据可能不太适合。

针对相关技术中，日志处理方案均是统一处理管理日志的全生命周期，但是对于有保密要求与敏感度较高的数据不太适合等问题，尚未提出有效的解决方案。

发明内容

本发明实施例提供了一种日志处理系统和方法、存储介质及电子装置，以至少解决相关技术中，日志处理方案均是统一处理管理日志的全生命周期，但是对于有保密要求与敏感度较高的数据不太适合等问题。

根据本发明实施例的一个实施例，提供了一种日志处理系统，包括：日志管理器、日志接收模块、日志派发模块、日志保存模块；其中，所述日志管理器，用于保存用于处理日志信息的规则信息，其中，所述规则信息包括：所述日志信息对应的消息中间件、所述日志信息对应的数据存储系统、所述日志信息的处理方法、所述日志信息的处理速度、所述日志信息的整合方式；所述日志接收模块，与所述日志管理器连接，用于接收所述日志管理器发送的所述消息中间件的第一标识信息，并根据所述第一标识信息向所述消息中间件获取所述日志信息；所述日志派发模块，与所述日志管理器连接，用于根据所述日志信息的处理方法、所述日志信息的处理速度对所述日志信息进行清理，以得到处理后的日志信息，以及接收所述日志管理器发送的所述日志信息对应的数据存储系统的第二标识信息；所述日志保存模块，与所述日志管理器连接，用于接收所述日志派发模块发送的处理后的日志信息和数据存储系统的第二标识信息，以根据所述第二标识信息将所述处理后的日志信息发送至所述数据存储系统。