[发明专利]用于教学辅助的提醒方法及提醒装置

说明书

本发明提供了一种用于教学辅助的提醒方法及提醒装置，属于智能教学领域。所述提醒方法包括：将教室内每一上课视频帧图像数据输入基于YOLOv4网络训练的班级人员模型，得到每一上课视频帧图像数据中的班级人员目标框；将班级人员目标框与图像预设划分区域对应关联；响应于异常行为区域确认信号，获取当前时刻的上课视频帧图像数据，将异常行为区域确认信号对应的图像预设划分区域中的班级人员目标框内的人像数据进行人脸识别处理，得到相应的人脸识别结果；根据人脸识别结果确定异常行为人员终端位置编码信息；根据异常行为人员终端位置编码信息发送相应的提示信息。本发明可以使得教室内人脸没有面向黑板侧的班级人员自动得到提醒，提高教学连贯性。

技术领域

本发明涉及智能教学领域，具体地，涉及一种用于教学辅助的提醒方法及一种用于教学辅助的提醒装置。

背景技术

现有的教学模式为：给学生分配一个教室，然后再为每个班级的学生分配一个科目老师，以使老师在该教室进行教学活动，同时教学过程中，有些教学计划分配课时比较重要，若该班级某个学生在上课时不认真，会跟不上后面的教学计划。老师判断学生不认真时，经常以学生是否面向老师(黑板侧)来判断学生是否认真，当科目老师看不到学生的脸时，经常会在课堂上停下来，去提醒不认真的同学，影响科目老师课堂教学。

发明内容

本发明的目的是提供一种用于教学辅助的提醒方法及一种用于教学辅助的提醒装置，用于解决老师不能在教学时，自动提醒不认真的同学。

为了实现上述目的，本发明提供了一种用于教学辅助的提醒方法，所述提醒方法包括：获取基于YOLOv4网络训练的班级人员模型；

实时获取教室内上课视频帧图像数据，将每一上课视频帧图像数据输入所述班级人员模型，得到每一上课视频帧图像数据中的班级人员目标框；并将每一上课视频帧图像数据中的班级人员目标框与图像预设划分区域对应关联；

响应于异常行为区域确认信号，获取当前时刻的上课视频帧图像数据，以及将所述异常行为区域确认信号对应的图像预设划分区域中的班级人员目标框内的人像数据进行人脸识别处理，并得到相应的人脸识别结果；

根据所述人脸识别结果，确定异常行为人员终端位置编码信息；

根据异常行为人员终端位置编码信息，发送相应的提示信息。

可选的，所述获取基于YOLOv4网络训练的班级人员模型，包括：

1)建立教室内上课视频数据集；

2)建立YOLOv4网络结构；

3)使用ImageNet大型数据集对步骤2)步骤中得到的YOLOv4网络结构进行训练，得到预训练模型，然后再对YOLOv4网络结构进行特定训练参数设定；

4)使用上课视频数据集对预训练模型进行迭代训练，直到损失函数收敛，得到基于YOLOv4网络训练的班级人员模型。

可选的，所述异常行为区域确认信号，基于以下条件生成：

获取每一图像预设划分区域中每个班级人员目标框的位置信息；

计算每一图像预设划分区域中相邻班级人员目标框的位置之间的距离的方差；

在图像预设划分区域对应的方差满足预设条件时，得到得到待定图像预设划分区域，并获取教师终端的异常行为区域信号；

根据所述教师终端的异常行为区域信号确定图像预设划分区域，并与所述待定图像预设划分区域进行区域一致性确认；

当确认一致时，输出异常行为区域确认信号。

可选的，所述将所述异常行为区域确认信号对应的图像预设划分区域中的班级人员目标框内的人像数据进行人脸识别处理，并得到相应的人脸识别结果；包括：