[发明专利]作业人员行为管控方法、装置、电子设备及存储介质

权利要求书

1.一种作业人员行为管控方法，其特征在于，包括：

S1：接收作业人员复诵的语音信息，所述语音信息为操作票记载的操作任务的当前操作步骤；

S2：识别所述语音信息，判断所述操作步骤是否包括要求穿戴绝缘手套的信息，若是，则执行步骤S3；若否，则执行步骤S4；

S3：获取实时作业视频，基于所述实时作业视频，判断所述作业人员是否穿戴绝缘手套，若否，则发出手套穿戴指令；

S4：在完成所述操作步骤后，判断是否存在未完成的下一项操作步骤，若是，则执行步骤S1；若否，则发出完成任务指令；

所述S2包括：

S21，通过所述语音信息，判断所述操作步骤是否涉及预先设定的关键字信息，若是，则执行步骤S22，若否，则执行步骤S4；

S22，从所述语音信息中识别操作任务的对象的电压等级；

S23，通过所述语音信息，判断所述操作步骤是否要求穿戴符合所述电压等级的绝缘手套，若是，则执行步骤S3；若否，则执行步骤S4。

2.根据权利要求1所述的作业人员行为管控方法，其特征在于，在所述步骤S2之前，还包括：

S11：获取电子操作票，所述电子操作票记载所述操作步骤的文字信息；

S12：识别所述语音信息，并判断所述语音信息与所述文字信息的内容是否一致，若否，则执行步骤S13；若是，则执行步骤S2；

S13：发出语音信息错误指令，并返回执行步骤S1。

3.根据权利要求1或2所述的作业人员行为管控方法，其特征在于，所述S3包括：

S31，从所述实时作业视频中抽取帧图像，得到待识别作业图像；

S32，将所述待识别作业图像输入预先训练的目标神经网络模型，判断所述作业人员手部是否裸露，若是，则发出手套穿戴指令；

S33，将所述待识别作业图像输入预先训练的目标神经网络模型，判断所述作业人员是否穿戴正确电压等级的绝缘手套；若否，则发出穿戴错误指令，并执行步骤S31；若是，则执行步骤S4。

4.根据权利要求3所述的作业人员行为管控方法，其特征在于，所述预先训练的神经网络模型为MobileNet模型，所述训练步骤包括：

从预先准备的图片样本库中分别筛选低压绝缘手套、中压绝缘手套、高压绝缘手套和无绝缘手套的图片样本，并分别标注为低压、中压、高压、无的样本类型；

采用80%的标注后的图片样本形成训练样本，以及采用20%的标注后的图片样本形成测试样本；

基于所述训练样本和测试样本，训练生成目标MobileNet网络模型。

5.根据权利要求4所述的作业人员行为管控方法，其特征在于，基于所述训练样本和测试样本，训练生成目标MobileNet网络模型，包括：

将所述训练样本输入所述MobileNet网络模型，得到MobileNet模型参数；

基于当前的MobileNet模型参数，将所述测试样本输入MobileNet网络模型，得到训练误差；

基于所述训练误差，对当前的MobileNet模型参数进行调整，以得到使训练误差最小的最优的网络参数，并采用所述最优的网络参数生成所述目标MobileNet网络模型。

6.根据权利要求5所述的作业人员行为管控方法，其特征在于，将所述训练样本输入所述MobileNet网络模型，得到MobileNet模型参数，包括：

将所有所述训练样本转换为对应的二进制格式数据；

将所述二进制格式数据依次输入所述MobileNet网络模型，生成MobileNet模型参数。