[发明专利]人机交互系统、方法、服务器、交互控制设备及存储介质

说明书

本申请实施例提供一种人机交互系统、方法、服务器、交互控制设备及存储介质。在本申请实施例中，依托于教学播放终端、交互控制设备、服务器组成的人机交互系统，首先，在学习者使用交互控制设备控制教学播放终端播放教学内容期间，利用所述交互控制设备采集包含所述学习者在内的视频数据；接着，服务器基于交互控制设备所采集的包括学习者在内的视频数据确定学习者的学习状态信息，以及将学习者的学习状态信息发送给教学播放终端；最后，教学播放终端在其屏幕上不仅仅是显示教学内容，还能同步显示学习者的学习状态信息，所展示的信息更为丰富，提升了系统资源利用率。此外，该系统还能够满足在线教育对学习者的学习状态监测的需求。

技术领域

本申请涉及人机交互技术领域，尤其涉及一种人机交互系统、方法、服务器、交互控制设备及存储介质。

背景技术

目前，越来越多的学习者通过在线课堂学习知识，在线课堂可以支持老师和学生进行实时视音频互动、在线直播教学、课件录制、课件回看、屏幕共享、文档共享、答题互动等教学活动。然而，线上教学场景中主要展示的是教学内容，展示信息不够丰富，系统资源利用率不高。

发明内容

本申请的多个方面提供一种人机交互系统、方法、服务器、交互控制设备及存储介质，用以丰富线上教学场景中展示信息的丰富度，提升系统资源利用率。

本申请实施例提供一种人机交互系统，包括：教学播放终端、交互控制设备以及服务器；

所述教学播放终端，用于根据所述交互控制设备的教学播放指令，从所述服务器获取对应教学内容并在其屏幕上播放所述教学内容；

所述交互控制设备，用于在所述教育播放终端播放所述教学内容期间，利用其摄像头采集包含学习者在内的视频数据，并上传至所述服务器；

所述服务器，用于从所述视频数据中识别所述学习者的姿态数据和/或表情数据；根据所述姿态数据和/或表情数据，生成所述学习者的学习状态信息；将所述学习状态信息发送给所述教学播放终端；

所述教育播放终端还用于：在播放所述教学内容期间，在其屏幕上同步显示所述学习者的学习状态信息。

本申请实施例还提供一种人机交互方法，包括：

获取在学习者使用交互控制设备控制教学播放终端播放教学内容期间，利用所述交互控制设备采集包含所述学习者在内的视频数据；

从所述视频数据中识别所述学习者的姿态数据和/或表情数据；

根据所述姿态数据和/或表情数据，生成所述学习者的学习状态信息；

将所述学习者的学习状态信息发送给所述教学播放终端，以供所述教学播放终端在播放所述教学内容期间同步显示所述学习者的学习状态信息。

本申请实施例还提供一种服务器，包括：存储器和处理器；

所述存储器，用于存储计算机程序；

所述处理器，与所述存储器耦合，用于执行所述计算机程序，以用于：

获取在学习者使用交互控制设备控制教学播放终端播放教学内容期间，利用所述交互控制设备采集包含所述学习者在内的视频数据；

从所述视频数据中识别所述学习者的姿态数据和/或表情数据；

根据所述姿态数据和/或表情数据，生成所述学习者的学习状态信息；

将所述学习者的学习状态信息发送给所述教学播放终端，以供所述教学播放终端在播放所述教学内容期间同步显示所述学习者的学习状态信息。

本申请实施例还提供一种交互控制设备，包括：存储器和处理器；

所述存储器，用于存储计算机程序；