[发明专利]一种基于多空间融合的学习者学习过程的专注度感知方法

权利要求书

1.一种基于多空间融合的学习者学习过程的专注度感知方法，其特征在于，所述方法包括：

获取学生教师课堂学习过程中的感知温度图像；

对所述感知温度图像进行预处理，并按照预设的频率选取所述感知温度图像的关键帧；

将选取的所述关键帧输入2D卷积神经网络，得到第一输出特征；

获取学生线上学习过程中的鼠标移动轨迹；

将若干张带有时间序列的所述鼠标移动轨迹输入3D卷积神经网络，得到第二输出特征；

将所述第一输出特征与第二输出特征输入SVM线性分类器，得到专注度分级结果；

所述对所述感知温度图像进行预处理，包括：

确定仪器测量的范围为x₀℃～x₁℃，所述感知温度图像的像素点为[r_i,g_j,b_k]；

通过使得x₀℃～x₁℃映射到所述像素点三个通道0～255的区间范围内；

所述选取所述感知温度图像的关键帧，包括：

通过固定间隔选帧和随机选帧的方式选取所述感知温度图像的关键帧，所述固定间隔选帧用于选取覆盖整个记录时间段的帧，所述随机选帧用于防止遗漏重要的产生变化的帧；

所述固定间隔选帧包括：

确定选取关键帧为p帧，红外视频的帧率为q帧每秒，视频总长度为s秒，则选取的帧对应位置的间隔为(s*q)/p；

所述随机选帧包括：

在每个固定选帧的时间区间内，随机选取两帧作为关键帧；

将所述随机选帧的关键帧与所述固定间隔选帧的关键帧叠加作为红外视频的关键帧；

所述获取学生线上学习过程中的鼠标移动轨迹，包括：

通过浏览器内置JavaScript函数获得鼠标相对于屏幕的当前位置；

设置计时器F，当所述鼠标开始移动时，将所述计时器F标记为true并使所述计时器F在不同时刻分别记录所述鼠标的位置；

当所述鼠标停止移动后，将所述计时器F标记为false并使所述计时器F停止记录所述鼠标的位置，生成鼠标移动轨迹图像；

当所述鼠标再次开始移动时，将所述计时器F标记为true并使所述计时器F重新在不同时刻分别记录所述鼠标的位置。