[发明专利]大数据作业的状态监测及健康度评估方法、装置

权利要求书

1.一种大数据作业的状态监测及健康度评估方法，其特征在于，包括：

预先为各种类型的作业配置监控参数，预先为各种分析项目配置分析参数；

在作业启动时，获取该作业的作业信息，根据所述作业信息，来获取该作业的作业类型所对应的监控参数；

在作业运行的过程中，根据所述监控参数，来采集关于该作业的作业运行数据；

对所述作业运行数据进行ETL处理，得到关于该作业的待评估数据；

根据所述分析参数，来对所述待评估数据进行分析，得到关于被分析的待评估数据所对应的作业的评分。

2.如权利要求1所述的大数据作业的状态监测及健康度评估方法，其特征在于，所述大数据作业的状态监测及健康度评估方法还包括：根据所述作业信息和监控参数/分析参数，来生成该作业在运行过程中的标识，不同的作业具有不同的标识，该标识作用于作业调度节点的开始位置和结束位置，以实现作业与调度环境之间的关联。

3.如权利要求1所述的大数据作业的状态监测及健康度评估方法，其特征在于，所述作业信息包括：该作业的基本信息和补充信息；其中，所述补充信息由该作业的作业类型和业务需要来确定。

4.如权利要求1所述的大数据作业的状态监测及健康度评估方法，其特征在于，所述监控参数包括：该作业类型的作业的状态上报频率、容错机制和报警机制。

5.如权利要求1所述的大数据作业的状态监测及健康度评估方法，其特征在于，在所述获取该作业的作业类型所对应的监控参数之后，还包括：根据获取的该作业的作业信息、以及该作业类型所对应的监控参数，来创建关于该作业的信息采集线程。

6.如权利要求1所述的大数据作业的状态监测及健康度评估方法，其特征在于，所述在作业运行的过程中，根据所述监控参数，来采集关于该作业的作业运行数据包括：根据预先配置的启动参数和监控参数来启动数据采集模块，所述数据采集模块周期性的监控各作业是否运行，若发现存在正在运行的作业，则根据该作业的作业类型，来获取该作业的作业类型所对应的监控参数，根据所述监控参数，来采集关于该作业的作业运行数据。

7.如权利要求1所述的大数据作业的状态监测及健康度评估方法，其特征在于，所述对所述作业运行数据进行ETL处理，得到关于该作业的待评估数据包括：获取关于相关指标模型的参数，根据所述关于相关指标模型的参数，来对作业运行数据进行ETL处理。

8.如权利要求1所述的大数据作业的状态监测及健康度评估方法，其特征在于，所述分析包括多个分析项目，不同分析项目分别具有对应的指标数据、加权系数和分析规则，经某个项目的分析后，得到被分析的节点关于该分析项目的分项评分。

9.如权利要求8所述的大数据作业的状态监测及健康度评估方法，其特征在于，根据被分析的节点关于各个分析项目的分项评分、各个分析项目的加权系数、各个分析项目的分析规则，来计算该被分析的节点的总体评分，计算公式为：

Score＝A₁W₁X₁+A₂W₂X₂+...+A_nW_nX_n

其中，Score表示总体评分，A_n表示各个分析项目的分析规则参数，W_n表示各个分析项目的权重系数，X_n表示各个分析项目的分项评分。

10.如权利要求1所述的大数据作业的状态监测及健康度评估方法，其特征在于，关于某节点的作业运行数据、待评估数据，均与其对应的节点的节点标识绑定共同传输，各节点的节点标识采用暗码。