[发明专利]一种基于AI的实验过程评价方法及装置

说明书

本发明提供了一种基于AI的实验过程评价方法及装置，涉及人工智能过程评价的技术领域，具体包括如下步骤：输入预设接线图信息，获取线路接线信息以及接线完成指令；响应于接线完成指令，基于预设接线图信息以及线路接线信息判定接线是否正确；若是，则获取第一实验图像信息并对实验图像信息进行面部表情识别以及行为动作识别；若否，则获取错误信息，并执行预设接线图信息，获取线路接线信息以及接线完成指令的步骤。通过本发明提供的方法及装置可以缓解现有技术中对学生的接线正误不能自动判断、面部表情和行为动作难以识别，教师对学生的实验能力不能进行公正公平评价的技术问题，以对学生的实验能力综合评价，了解教学实验效果。

技术领域

本发明涉及人工智能过程评价的技术领域，尤其是涉及一种基于AI的实验过程评价方法及装置。

背景技术

以往的实验教学都是教师通过学生的实验预习、实验报告以及对学生的印象来评价学生的实验能力，缺乏对实验过程的定量分析，学生的实验能力评价无数据支持。在实验教学过程中，对于电类实验，往往都是按照学生先接线，老师再检查，确认无误后再上电进行实验的步骤，加大了教师的负担。同时在进行实验评价时，无法对学生实验过程中的面部表情、行为动作进行识别；对于学生厌恶，中性和高兴的面部表情；趴，左顾右盼和玩手机等行为无法识别统计，不能对学生的实验能力进行公正公平的评价，也难以了解实验教学的效果。

发明内容

有鉴于此，本发明的目的在于提供一种基于AI的实验过程评价方法及装置，以缓解现有技术中对学生的接线正误不能自动判断、面部表情和行为动作难以识别，教师对学生的实验能力不能进行公正公平评价的技术问题，以对学生的实验能力极性综合评价，了解教学实验效果。

本发明提供了一种基于AI的实验过程评价方法，具体包括如下步骤：

输入预设接线图信息，获取线路接线信息以及接线完成指令；

响应于所述接线完成指令，基于所述预设接线图信息以及所述线路接线信息判定接线是否正确；

若是，则获取第一实验图像信息并对所述实验图像信息进行面部表情识别以及行为动作识别；

若否，则获取错误信息，并执行所述预设接线图信息，获取线路接线信息以及接线完成指令的步骤。

优选的，所述获取实验图像信息并对所述实验图像信息进行面部表情识别以及行为动作识别的步骤包括：

利用YOLOv4算法对所述第一实验图像信息像素转换以获取第二实验图像信息；

构建VGG16模型以对所述第二实验图像信息进行面部表情识别，构建所述ResNet18模型以对所述第二实验图像信息进行行为动作识别。

优选的，所述利用YOLOv4算法对所述第一实验图像信息像素转换以获取第二实验图像信息的步骤包括：

所述利用YOLOv4算法对所述第一实验图像信息像素转换以获取第二实验图像信息的步骤包括：

构建YOLOv4网络结构图，所述YOLOv4网络结构图包括主干特征提取网络、第一加强特征提取网络和第二加强特征提取网络以及预测结果；

所述主干特征提取网络包括Darknet卷积层以及残差网络结构，所述主干特征提取网络用于获取所述第一实验图像信息的有效特征层；

所述第一加强特征网络用于对获取所述第一实验图像信息的有效特征层进行池化处理，将池化处理后的所述第一实验图像信息的有效特征层进行卷积处理以获取第一实验图像信息第一残差网络的特征层；

对所述第一残差网络结构层进行上采样以获取第一实验图像信息第二残差网络的一个特征层，对所述第一实验图像信息第一残差网络特征层以及第一实验图像信息第二残差网络的一个特征层进行特征融合以及卷积处理以获取第一实验图像信息第一特征层，所述第二残差网络为所述残差网络结构的倒数第二层；