[发明专利]学习监控方法、装置及电子设备

权利要求书

1.一种学习监控方法，其特征在于，包括：

对课堂学生所在的课堂进行三维建模，生成三维教室模型；根据所述三维教室模型中的热力图，实时确定所述课堂学生的位置，并将所述课堂学生对应的热力图部分与所述课堂学生绑定；其中，所述热力图根据侦测到的人体散射的热量形成；

根据确定的所述课堂学生的位置，确定当前处于上课状态时获取所述三维教室模型中的课堂学生的上课图像；

对所述上课图像进行识别，获取所述课堂学生的特征数据，其中，所述特征数据包括以下至少之一：所述课堂学生的面部特征数据、所述课堂学生的视觉特征数据、所述课堂学生的肢体特征数据；

根据所述课堂学生的特征数据，确定所述课堂学生的上课状态。

2.根据权利要求1所述的方法，其特征在于，所述上课状态包括以下至少之一：课堂专注程度、课堂互动程度、课程喜爱程度。

3.根据权利要求2所述的方法，其特征在于，根据所述课堂学生的特征数据，确定所述课堂学生的上课状态包括：

对所述课堂学生的各特征数据与预存的上课状态样本图像的各特征数据进行比较，根据比较结果确定各课堂学生的当前状态及当前状态对应的分值；

根据所述当前状态及所述分值，确定各课堂学生的课堂专注程度、课堂互动程度、课程喜爱程度中的至少一个上课状态；

其中，所述上课状态样本图像中标注有学生的特征数据、状态数据、及与所述状态数据对应的分值。

4.根据权利要求3所述的方法，其特征在于，对所述课堂学生的各特征数据与预存的上课状态样本图像的各特征数据进行比较，根据比较结果确定各课堂学生的当前状态及当前状态对应的分值；根据所述当前状态及所述分值，确定各课堂学生的课堂专注程度、课堂互动程度、课程喜爱程度中的至少一个上课状态包括：

针对各课堂学生,

将所述课堂学生的面部特征数据与所述上课状态样本图像中的面部特征数据进行比较，根据比较结果确定所述课堂学生的面部表情与所述上课状态样本图像中的面部表情是否匹配；将所述课堂学生的面部特征数据和视觉特征数据与所述上课状态样本图像中的面部特征数据和视觉特征数据进行比较，根据比较结果确定所述课堂学生的视线方向与所述上课状态样本图像中的视线方向是否匹配；将所述课堂学生的肢体特征数据与所述上课状态样本图像中的肢体特征数据进行比较，根据比较结果确定所述课堂学生的肢体动作与所述上课状态样本图像中的肢体动作是否匹配；根据面部表情匹配结果、视线方向匹配结果和肢体动作匹配结果，确定所述课堂学生的第一当前状态及第一当前状态对应的第一分值；根据所述第一当前状态及所述第一分值，确定所述课堂学生的课堂专注程度；

和/或，

将所述课堂学生的面部特征数据与所述上课状态样本图像中的面部特征数据进行比较，根据比较结果确定所述课堂学生的嘴部动作与所述上课状态样本图像中的嘴部动作是否匹配；将所述课堂学生的面部特征数据和视觉特征数据与所述上课状态样本图像中的面部特征数据和视觉特征数据进行比较，根据比较结果确定所述课堂学生的视线方向与所述上课状态样本图像中的视线方向是否匹配；将所述课堂学生的肢体特征数据与所述上课状态样本图像中的肢体特征数据进行比较，根据比较结果确定所述课堂学生的肢体动作与所述上课状态样本图像中的肢体动作是否匹配；根据嘴部动作匹配结果、视线方向匹配结果和肢体动作匹配结果，确定所述课堂学生的第二当前状态及第二当前状态对应的第二分值；根据所述第二当前状态及所述第二分值，确定所述课堂学生的课堂互动程度；

和/或，

将所述课堂学生的面部特征数据与所述上课状态样本图像中的面部特征数据进行比较，根据比较结果确定所述课堂学生的面部表情与所述上课状态样本图像中的面部表情是否匹配；根据面部表情匹配结果，确定所述课堂学生的第三当前状态及第三当前状态对应的第三分值；根据所述第三当前状态及所述第三分值，确定所述课堂学生的课程喜爱程度。

5.根据权利要求3或4所述的方法，其特征在于，所述方法还包括：

根据各课堂学生的课堂专注程度、课堂互动程度、课程喜爱程度中的至少一个上课状态对应的分值，以及，所述课堂图像的获取时间，生成上课信息曲线图。