[发明专利]基于时间节点标记反馈学习状态的智慧教育平台

权利要求书

1.一种基于时间节点标记反馈学习状态的智慧教育平台，其特征在于，包括用户终端、授课终端和实现授课终端和用户终端进行信息交互的网络单元；

所述用户终端用于获取授课终端上的视频进行学习、接收授课终端的指令进行图像和音频获取，并反馈给授课终端、和接收授课终端反馈的学习评估结果；

所述授课终端对视频进行时间节点标记，并基于时间节点标记对各授课知识点对应的视频进行截取保存，基于各时间节点标记分别向用户端发送图像获取指令和音频获取指令，并通过用户终端获取的多张图像进行相似度匹配以及音频与已有的音频进行音频识别，并将图像相似度识别的结果和音频识别结果与给定的值进行比较后反馈给用户终端，同时通过图像相似度识别的结果和音频识别结果判断是否需要向用户终端反馈相应授课知识点的视频。

2.根据权利要求1所述的一种基于时间节点标记反馈学习状态的智慧教育平台，其特征在于：对视频进行时间节点标记是指，通过人工标记或语义标记的方式标记各授课知识点的起始时间和结束时间。

3.根据权利要求2所述的一种基于时间节点标记反馈学习状态的智慧教育平台，其特征在于：所述语义标记的步骤如下：

授课终端录制视频或播放视频时，基于音转字的方法将得到视频中的文字内容，将文字内容中的字符与视频进行时间点映射；

根据文字内容中的标点字符，对文字内容进行语句提取，并根据语句在文字内容中的先后顺序进行进行标记；

基于语义解析对标记后的语句进行分类；

在各分类中提取首尾标记的语句，并基于首标记语句的首字符、尾标记语句的尾字符进行时间点映射查询，查询到对应的时间点后，在视频的时间轴上加载标记符号，即对视频进行时间节点标记。

4.根据权利要求3所述的一种基于时间节点标记反馈学习状态的智慧教育平台，其特征在于：基于语义解析对标记后的语句进行分类的步骤如下：

基于语义解析，解析各标记后的语句；

将解析后的语义和语句进行关联；

若语句为视频的首个语句，直接将其分为一个授课知识点的类别，否则，基于语义相似度算法判断当前语句与前一语句所分类的授课知识点的类别中的语句的语义相似度，若所有语义相似度值取平均后达到给定的阈值，则将对应的语句归入当前授课知识点的类别，否则，单独归入一个授课知识点的类别。

5.根据权利要求1或4所述的一种基于时间节点标记反馈学习状态的智慧教育平台，其特征在于：所述图像获取指令是指授课终端检测到时间节点标记即会发出让用户终端在该时间节点连续拍照或间隔拍照获取图像的指令。

6.根据权利要求1所述的一种基于时间节点标记反馈学习状态的智慧教育平台，其特征在于：所述音频获取指令是指授课终端根据时间节点标记所对应的视频中的互动内容向用户终端发出录制音频的指令，音频为跟读音频、解题音频、回答为“不会”或“没理解”的音频或无声音频。

7.根据权利要求1所述的一种基于时间节点标记反馈学习状态的智慧教育平台，其特征在于：所述多张图像进行相似度的步骤如下：

若图像为两张的步骤如下：

将相邻时间点获取的图像进行相似度对比，即得到最后的相似度值；

若图像为三张以上的步骤如下：

将相邻时间点获取的图像进行相似度对比，并将对比后得到的相似度进行加权取均值，即得到第一相似度值；

将时间节点标记内获取的首张图像分别与后续获取的图像进行相似对比，并将对比后得到的相似度进行加权取均值，即得到第二相似度值；

将第一相似度值和第二相似度值相加后取平均，得到最后的相似度值。