[发明专利]运维数据的管理系统及方法、汇聚服务器及处理服务器

说明书

本发明实施例涉及数据处理技术领域，公开了一种运维数据的管理系统及方法、汇聚服务器及处理服务器。本发明中，运维数据的管理系统包括：至少一汇聚服务器，用于采集至少一产品的运维数据，其中运维数据至少包括两种类型的数据项；至少一处理服务器，用于以数据项的属性特征所对应的处理规则，对数据项进行处理，其中属性特征至少包括数据项的类型；数据库，用于存储处理服务器处理后的数据项，以形成至少一产品的分析数据；从而实现了对同一产品庞大的运维数据的整合统一。

技术领域

本发明实施例涉及数据处理技术领域，特别涉及运维数据的管理系统及方法、汇聚服务器及处理服务器。

背景技术

互联网运维，与研发、测试、系统管理同为互联网产品技术支撑的4大部门。一般来讲国内的互联网运维负责软件测试交付后的发布和管理，其核心目标是将交付的业务软件和硬件基础设施高效合理的整合，转换为可持续提供高质量服务的产品，同时最大限度降低服务运行的成本，保障服务运行的安全。传统的产品运维方式包括手动登陆源机器查看产品运行状态、手动检索目标行命令过滤日志，也包括使用一些特定的监控平台进行产品监控，使用特定的日志平台进行日志汇聚等。

然而，发明人发现现有技术中至少存在如下问题：一方面，这些平台间互相隔离，不同数据类型之间传递闭塞，整体运维效率低；另一方面，一个系统产品所产生的行为数据极其庞大，这些数据包括日志数据、机器性能数据、产品状态数据、产品指标数据等，传统的运维手段很难对这些庞大的数据进行有效的统一管理和价值利用。

发明内容

本发明实施方式的目的在于提供一种运维数据的管理系统及方法、汇聚服务器及处理服务器，实现了对同一产品庞大的运维数据的整合统一。

为解决上述技术问题，本发明的实施方式提供了一种运维数据的管理系统，包括：至少一汇聚服务器，用于采集至少一产品的运维数据，其中所述运维数据至少包括两种类型的数据项；至少一处理服务器，用于以所述数据项的属性特征所对应的处理规则，对所述数据项进行处理，其中所述属性特征至少包括所述数据项的类型；数据库，用于存储所述处理服务器处理后的数据项，以形成所述至少一产品的分析数据。

本发明的实施方式还提供了一种汇聚服务器，包括：采集模块、暂存模块以及传输模块；所述采集模块用于采集至少一产品的运维数据，并将所述运维数据汇聚在所述暂存模块中存储；其中所述运维数据至少包括两种类型的数据项；所述传输模块用于将汇聚的所述运维数据发送至一处理服务器。

本发明的实施方式还提供了一种汇聚服务器，包括：识别模块、处理模块和至少两个队列；所述识别模块用于上述汇聚服务器接收所述至少一产品的运维数据，并将所述运维数据中属性特征相同的数据项分配至同一队列中，其中所述属性特征至少包括所述数据项的类型；所述处理模块用于根据各队列的预设的处理规则，对各所述队列中的数据项进行处理；其中，各队列的预设的处理规则与各所述队列中的数据项的属性特征相对应。

本发明的实施方式还提供了一种运维数据的管理方法，包括：采集至少一产品的运维数据，其中所述运维数据至少包括两种类型的数据项；以所述数据项的属性特征所对应的处理规则，对所述数据项进行处理，其中所述属性特征至少包括所述数据项的类型；存储所述处理服务器处理后的数据项，以形成所述至少一产品的分析数据。

本发明实施方式相对于现有技术而言，汇聚服务器采集至少一产品的运维数据，且所述运维数据至少包括两种类型的数据项；处理服务器以所述数据项的属性特征所对应的处理规则对所述数据项进行处理；数据库存储处理后的数据项，以形成所述至少一产品的分析数据。即，同一产品的运维数据(包括不同类型的数据项)能够汇聚在一起处理并存储；从而，实现了对同一产品庞大的运维数据的整合统一，同时，数据被整合统一后可以提供一个完整的信息平台，为后续的访问查询提供了便捷。