[发明专利]注意力评估方法、装置、终端设备及计算机可读存储介质

说明书

本发明属于视频图像处理领域，尤其涉及一种注意力评估方法、装置、终端设备及计算机可读存储介质。所述方法首先获取待评估用户的视频，然后从所述视频中提取所述待评估用户的特征，并将所述待评估用户的特征输入到回归网络中进行处理，由于所述回归网络为预先训练好的进行注意力评估的神经网络模型，使用其对待评估用户的特征进行处理，可以得到对所述待评估用户的注意力评估结果。通过本发明，可以在电子课堂教育中，使得教师充分地了解到学生的注意力情况，针对学生的注意力情况及时对教学方式进行调整，从而带来教学效果的显著提升。

技术领域

本发明属于视频图像处理领域，尤其涉及一种注意力评估方法、装置、终端设备及计算机可读存储介质。

背景技术

随着移动互联网技术的迅猛发展，电子课堂教育得到了不断的普及，由于电子课堂教育的特点，使得教师无法充分地了解到学生的注意力情况，难以针对学生的注意力情况及时对教学方式进行调整，从而导致教学效果较差。

发明内容

有鉴于此，本发明实施例提供了一种注意力评估方法、装置、终端设备及计算机可读存储介质，以解决在电子课堂教育中，教师无法充分地了解到学生的注意力情况，教学效果较差的问题。

本发明实施例的第一方面提供了一种注意力评估方法，可以包括：

获取待评估用户的视频；

从所述视频中提取所述待评估用户的特征；

将所述待评估用户的特征输入到回归网络中进行处理，得到对所述待评估用户的注意力评估结果，所述回归网络为预先训练好的进行注意力评估的神经网络模型。

进一步地，所述从所述视频中提取所述待评估用户的特征可以包括：

将所述视频划分为N个视频段，N为正整数；

分别从各个视频段中提取所述待评估用户的特征。

进一步地，所述分别从各个视频段中提取所述待评估用户的特征可以包括：

分别从各个视频段中提取所述待评估用户的姿态特征；

和/或

分别从各个视频段中提取所述待评估用户的人脸特征；

和/或

分别从各个视频段中提取所述待评估用户的三正交平面局部二值模式特征；

和/或

分别从各个视频段中提取所述待评估用户的三维卷积特征。

进一步地，所述将所述待评估用户的特征输入到回归网络中进行处理，得到对所述待评估用户的注意力评估结果可以包括：

将各种特征分别输入到由长短期记忆网络和全连接层组成的回归网络中进行处理，得到基于各种特征的评估结果；

将基于各种特征的评估结果进行融合处理，得到对所述待评估用户的注意力评估结果。

进一步地，所述回归网络在训练过程中使用如下式所示的损失函数：

其中，y为网络输出，G为标准值，且G＝C(F(M(T₁),θ),F(M(T₂),θ),......)，C为所述回归网络的处理函数，F为特征计算函数，M为每个时间段的矩阵，θ为网络节点的参数，T_i为不同的时间段，L_r为正则项公式，且I为同属一个特征的集合，k为I中的元素数量，y_i为当前的样本输出。

本发明实施例的第二方面提供了一种注意力评估装置，可以包括：