[发明专利]一种监控方法及装置

说明书

一种监控方法，包括：根据业务的产出路径，确定待监控的目标任务组；监控出现异常的任务时，确定该任务的关键路径，关键路径是指使得该任务在预期完成时刻完成的上游链路；将得到的出现异常的任务的关键路径发送给用户，以便业务的产出路径进行优化。如此，实现业务运行中任务的有效自动监控。

技术领域

本发明涉及数据处理技术，尤其涉及一种监控方法及装置。

背景技术

目前，数据平台上运行的任务数量不断增加，任务之间的依赖关系越来越复杂。当整个数据平台中的任务达到一定数量时，通过人工操作无法有效梳理出需要监控的任务，也无法有效合理地对每个任务进行报警设置，从而导致无法对数据平台上运行的任务进行有效监控。

发明内容

以下是对本文详细描述的主题的概述。本概述并非是为了限制权利要求的保护范围。

本申请实施例提供一种监控方法及装置，实现对任务的有效自动监控。

第一方面，本申请实施例提供一种监控方法，包括：

根据业务的产出路径，确定待监控的目标任务组；

监控出现异常的任务时，确定该任务的关键路径，关键路径是指使得该任务在预期完成时刻完成的上游链路；

将得到的出现异常的任务的关键路径发送给用户，以便业务的产出路径进行优化。

在示例性实施方法中，所述确定待监控的目标任务组之后，上述方法还可以包括：监控出现异常的任务时，确定该任务对应的报警事件，根据所述报警事件，将得到的出现异常的任务的报警信息发送给用户，以便维持业务的正常运行。

第二方面，本申请实施例提供一种监控装置，包括：存储器、处理器以及存储在所述存储器上并在所述处理器上运行的监控程序，所述监控程序被所述处理器执行时实现以下操作：

根据业务的产出路径，确定待监控的目标任务组；监控出现异常的任务时，确定该任务的关键路径，关键路径是指使得该任务在预期完成时刻完成的上游链路；将得到的出现异常的任务的关键路径发送给用户，以便业务的产出路径进行优化。

第三方面，本申请实施例提供一种监控方法，包括：

根据在待监控的业务中定义的一个或多个基线任务，确定所述业务运行中待监控的目标任务组，其中，所述目标任务组中包括全部基线任务以及任一基线任务的上游任务；

监控所述目标任务组。

在示例性实施方式中，所述基线任务可以包括所述待监控的业务中产出设定信息的任务。

在示例性实施方式中，所述根据在待监控的业务中定义的一个或多个基线任务，确定所述业务运行中待监控的目标任务组，可以包括：

针对任一基线任务，通过遍历所述基线任务所在的有向无环图(DAG)，确定所述基线任务的上游任务；

将全部基线任务以及任一基线任务的上游任务确定为包括在待监控的目标任务组中。

在示例性实施方式中，所述监控所述目标任务组，可以包括：

针对所述目标任务组中的任一任务，在检测到所述任务运行异常时，生成报警事件；

根据所述报警事件，确定接收报警信息的对象、发出报警信息的时刻以及方式。

在示例性实施方式中，所述在检测到所述任务运行异常时，生成报警事件，可以包括以下至少之一：

在检测到所述任务运行失败时，生成出错报警事件；

在检测到所述任务的本次运行时长与平均运行时长的差值大于或等于阈值时，生成变慢报警事件。