[发明专利]一种云分析系统中的任务监测方法以及装置

说明书

本申请公开了一种云分析系统中的任务监测方法，包括，为来自用户任务请求中的任务附加标签信息，该标签信息至少包括该任务的处理主体名称、以及实际耗时；记录该任务进入当前处理主体的时间戳、离开当前处理主体的时间戳；根据所述进入时间戳和离开时间戳，计算当前处理主体的实际耗时，在所述标签信息中记录当前处理主体名称、以及实际耗时；判断该任务的所有处理是否结束，如果没有，则进入下一处理主体，返回执行所述记录该任务进入当前处理主体的时间戳、离开当前处理主体的时间戳的步骤，直至该任务的所有处理结束。本申请能够找到整个系统耗时的瓶颈点，快速地发现任务处理过程中存在异常的处理主体，使得维护人员能够高效、有针对性进行云分析系统的故障排查。

技术领域

本申请实施例涉及云计算集群分析领域，特别涉及一种云分析系统中的任务监测方法以及装置。

背景技术

在云计算技术中，云分析系统负责接收作业任务，例如图片任务或者视频任务，对作业任务进行目标分析，以输出任务的目标属性等，并对整个分析资源进行管理和调度。

参见图1所示，图1为云分析系统网络拓扑结构的一种示意图。目前的云分析系统包括调度节点、计算节点，其中，调度节点提供虚拟IP地址为用户建立与云分析系统的网络连接，当用户提交一个作业任务到调度节点，调度节点根据一定的调度算法，将任务下发到计算节点；计算节点具体分析任务，发送分析结果给调度节点。各节点很多模块构成，其中，调度节点包括中心管理模块、任务调度模块、数据存储模块，计算节点包括调用任务执行模块、引擎解析模块(引擎API)、分析引擎模块。

参见图2所示，图2示出了现有的任务监测的方法，当调度节点接收到用户提交的任务时，调度节点对该任务启动计时；根据调度算法，调度节点将用户提交的任务下发至计算节点；计算节点对任务进行分析，分析完毕后，通知调度节点结束计时；由此，调度节点得到该任务的耗时时间，并可上报给用户。上述过程中，调度服务和计算节点通过心跳交互任务信息。

从上述任务监测的方法可以看出，当一个任务经过云分析系统时，目前只能得到该任务作业的总耗时，这样导致了存在以下问题：

(1)当任务作业分析耗时异常，无法明确定位故障，需要专业人员来反复测试、排查以定位故障；

(2)当需要对整个系统的任务作业分析的耗时进行分析和优化时，往往也较为困难。

发明内容

本申请实施例提供了一种云分析系统中的任务监测方法，以对任务的监测进行优化。

本申请实施例的一种云分析系统中的任务监测方法，该方法包括，

为来自用户任务请求中的任务附加标签信息，该标签信息至少包括该任务的处理主体名称、以及实际耗时；

记录该任务进入当前处理主体的时间戳、离开当前处理主体的时间戳；

根据所述进入时间戳和离开时间戳，计算当前处理主体的实际耗时，

在所述标签信息中记录当前处理主体名称、以及实际耗时；

判断该任务的所有处理是否结束，如果没有，则进入下一处理主体，返回执行所述记录该任务进入当前处理主体的时间戳、离开当前处理主体的时间戳的步骤，直至该任务的所有处理结束。

较佳地，所述标签信息还包括耗时阈值和报警标志，

所述根据所述进入时间戳和离开时间戳，计算当前处理主体的实际耗时，进一步包括，判断实际耗时是否大于所述耗时阈值，如果实际耗时大于耗时阈值，则将标签信息中该处理主体对应的报警标志设置为报警状态。

较佳地，该方法进一步包括，当所述任务的所有处理结束时，根据该任务标签信息中的报警标志统计所有处理主体是否存在报警，如果是，则上报该任务的任务信息和标签信息。

其中，所述云分析系统至少包括调度节点和计算节点，