[发明专利]一种基于云加端模式的运维数据处理系统

摘要

本发明公开了一种基于云加端模式的运维数据处理系统和方法，包括：运维云服务：部署在云端，接收企业端上传的运维数据，基于云计算资源对云进行分析和管理数据，并下发给各个运维企业端，所述管理数据包括数据通信、数据分析、数据存储和处理规则；运维企业端：部署在每个企业防火墙内部的独立服务器上，该服务器需要对互联网的访问权限，但不必被外界网络访问到；所述运维企业端接收Agent采集运维数据，存储到本地，按照处理规则进行分析处理后，上传到云端服务系统；Agent：部署在运行业务系统的服务器上，是采集数据的探针和命令执行器；每个Agent对应唯一的企业运维端系统，向其发送运维数据并接受运维指令。

主权项

1.一种基于云加端模式的运维数据处理系统，其特征在于，所述运维数据处理系统系统包括：/n运维云服务：部署在云端，接收企业端上传的运维数据，基于云计算资源对云进行分析和管理数据，并下发给各个运维企业端，所述管理数据包括数据通信、数据分析、数据存储和处理规则；所述处理规则包括数据的采集规则、汇总规则、上传条件和基准库；/n运维企业端：部署在每个企业防火墙内部的独立服务器上，该服务器需要对互联网的访问权限，但不必被外界网络访问到；所述运维企业端接收Agent采集运维数据，存储到本地，按照处理规则进行分析处理后，上传到云端服务系统；/n所述运维数据包括性能数据、业务数据和快照数据三种；所述业务数据是业务处理过程数据，需要实时收集，企业端每隔一段时间，对业务数据进行汇总，并将汇总数据上传到云端，云端定期的进行处理和分析，发掘用户的操作习惯、热度应用操作，并以报表形式呈现；/n所述汇总的类别包括业务领域、业务模块、业务操作、操作耗时、执行次数、数据库连接数量和执行SQL数量，在云端定义基准库，包括性能基准库、异常基准库和故障基准库；所述基准库由多个企业端数据综合生成，按照各个企业端系统的硬件配置、操作系统类型和并发数以及相关环境因素进行归档和分类，并随着数据的积累自动调整；/n所述运维云服务和运维企业端之间采用消息队列作为通信协议，在云端部署消息队列服务器，企业端系统向消息服务器发送消息，并监听特定的消息频道，云端通过消息发送信息令给各个云端子系统，其具体过程如下：/n企业端通过消息队列服务器，定时上传运维数据包到云端，每个数据包包括起止时间、运维数据内容、企业端标识ID；/n云端接收到数据包后进行解析，将每条数据ID+企业端ID作为主键，进行存储，防止数据的重复，成功存储后，将该时间段设为完成；/n云端定时检查数据完整性，对未完成的时间段，向企业端发送数据重传请求，完成数据的补偿过程；/nAgent：部署在运行业务系统的服务器上，是采集数据的探针和命令执行器；每个Agent对应唯一的企业运维端系统，向其发送运维数据并接受运维指令。/n