[发明专利]数据处理系统的监测方法、装置以及计算机设备

说明书

本申请提出一种数据处理系统的监测方法、装置，数据处理系统包括至少两个层级，其中，方法包括：通过将测试数据输入数据处理系统，以使数据处理系统中的各层级顺序对测试数据进行数据处理；获取测试数据经过各层级进行处理输出的中间数据；当各层级输出的中间数据为相应层级对应的标准数据时，确定各层级输出标准数据的时刻；根据测试数据输入数据处理系统的时刻，与各层级输出标准数据的时刻之间的时间差，监测各层级的时延。该方法通过数据处理系统的各层级对测试数据进行数据处理，监测各层级对测试数据处理的过程，实现了实时监测数据处理系统的性能，以便当系统出现异常时，能够及时发现问题并准确定位到故障位置。

技术领域

本申请涉及互联网技术领域，尤其涉及一种数据处理系统的监测方法、装置以及计算机设备。

背景技术

目前，在大数据背景下，基于业务场景、客户需求等原因，对数据处理及产出报表的时效性要求越来越高，处理数据的系统也越来越复杂，因此，对数据处理系统的监控，实现故障问题预警是至关重要的。

但是，对于数据处理系统的故障监控大多采用通用性的运维监控方案来解决，例如在机器层面监控实现对中央处理器、内存、网络、磁盘等的监控；在系统层面实现对进程、端口等监控。现有技术中，监控内容较为片面，导致当数据处理系统出现异常情况时，无法及时的定位到异常环节。

发明内容

本申请旨在至少在一定程度上解决相关技术中的技术问题之一。

本申请提出一种数据处理系统的监测方法，通过对数据处理过程进行监控，以实现实时监测数据处理系统的性能，以便当系统出现异常时，能够及时发现问题并准确定位到故障位置。

本申请一方面实施例提出了一种数据处理系统的监测方法，所述数据处理系统包括至少两个层级，所述监控方法包括以下步骤：

将测试数据输入所述数据处理系统，以使所述数据处理系统中的各层级顺序对所述测试数据进行数据处理；

获取所述测试数据经过各层级进行处理输出的中间数据；

当各层级输出的中间数据为相应层级对应的标准数据时，确定各层级输出所述标准数据的时刻；

根据所述测试数据输入所述数据处理系统的时刻，与各层级输出所述标准数据的时刻之间的时间差，监测各层级的时延。

本申请的数据处理系统的监测方法，通过将测试数据输入数据处理系统，以使数据处理系统中的各层级顺序对测试数据进行数据处理；获取测试数据经过各层级进行处理输出的中间数据；当各层级输出的中间数据为相应层级对应的标准数据时，确定各层级输出标准数据的时刻；根据测试数据输入数据处理系统的时刻，与各层级输出标准数据的时刻之间的时间差，监测各层级的时延。该方法通过数据处理系统的各层级对测试数据进行数据处理，将各层级输出的中间数据与对应的标准数据进行匹配，进而根据测试数据输入数据处理系统的时刻，与各层级匹配到标准数据的时刻之间的时间差，监测各层级对测试数据处理的时延，实现了实时监测数据处理系统的性能，以便当系统出现异常时，能够及时发现问题并准确定位到故障位置。

本申请又一方面实施例提出了一种数据处理系统的监测装置，包括：

输入模块，用于将测试数据输入所述数据处理系统，以使所述数据处理系统中的各层级顺序对所述测试数据进行数据处理；

获取模块，用于获取所述测试数据经过各层级进行处理输出的中间数据；

确定模块，用于当各层级输出的中间数据为相应层级对应的标准数据时，确定各层级输出所述标准数据的时刻；

监测模块，用于根据所述测试数据输入所述数据处理系统的时刻，与各层级输出所述标准数据的时刻之间的时间差，监测各层级的时延。