[发明专利]一种在线课堂智能互动装置

说明书

本发明公开了一种在线课堂智能互动装置，包括课堂端互动设备、教师端互动设备、智能处理装置、信号获取模块、人工智能处理模块、结构化数据输出模块、人脸识别单元、举手识别单元和站立识别单元，所述课堂端互动设备通过网络与教师端互动设备相连接，采集各自的声音、视觉传感信号，经过编码和复合处理形成多媒体流发送至对端播放和展现，所述智能处理装置同课堂端互动设备和教师端互动设备建立网络连接。该在线课堂智能互动装置设置有在远程教学在线课堂中老师和学生彼此陌生或者老师无法记清楚学生姓名的情况下老师可知晓举手学生或者站立学生的姓名，从而可和他进行更一步的实时互动，拉近彼此，让异地不再是距离。

技术领域

本发明涉及数据通信相关设备技术领域，具体为一种在线课堂智能互动装置。

背景技术

随着互联网的发展，远程教育教学越来越普遍。直播互动教学是远程教育现有技术的典型代表，老师端依据视觉传感器把教学内容传给远端的课堂，课堂端依据视觉传感器把课堂画面传给老师，以此系统实现异地教学。对于类似兴趣班、培训班或者外教课的远程教学来说，由于报名参加的学生生源及老师资源是动态变化的，老师和学生相互之间的彼此不熟悉和不了解，另外，班级课堂中学生人数众多，老师很难一一叫出学生名字，这样导致了老师和学生之间互动的亲近感不强和互动效果不理想，因此市面上迫切需要能改进在线课堂智能互动装置结构的技术，来完善此设备。

发明内容

本发明的目的在于提供一种在线课堂智能互动装置，以解决上述背景技术提出的目前市场上的现有技术远程教学在线课堂老师和学生之间异地互动效果不理想、亲近感不强等一些痛点的问题。

为实现上述目的，本发明提供如下技术方案：一种在线课堂智能互动装置，包括课堂端互动设备、教师端互动设备、智能处理装置、信号获取模块、人工智能处理模块、结构化数据输出模块、人脸识别单元、举手识别单元和站立识别单元，所述课堂端互动设备通过网络与教师端互动设备相连接，采集各自的声音、视觉传感信号，经过编码和复合处理形成多媒体流发送至对端播放和展现，其中；

所述智能处理装置同课堂端互动设备和教师端互动设备建立网络连接，智能处理装置分别获取课堂端互动设备和教师端互动设备产生的多媒体流经人工智能处理模块处理对应生成结构化数据发送至对端，对应终端设备获取和解析结构化数据，和实时互动的多媒体内容叠加渲染和输出；

所述智能处理装置包括信号获取模块、人工智能处理模块和结构化数据输出模块，所述信号获取模块负责获取多媒体流及解复用处理成音频、视频信号，所述人工智能处理模块包括人脸识别单元、举手识别单元和站立识别单元等，视频信号输入到人工智能处理模块，举手识别单元和站立识别单元计算和处理产生当前课堂场景学生是否存在有举手和站立的情况，若存在举手和站立的学生，则把举手和站立学生的图像区域数据送至人脸识别单元进行人脸识别处理，识别计算当前举手和站立的学生是谁，结构化数据输出模块最终输出当前课堂序列视频中是否存在举手或者站立情况、举手或者站立学生相对于整张图像中的区域坐标和对应举手或者站立学生是谁等结构化数据信息。

优选的，所述结构化数据信息发送至教师端互动设备，且教师端互动设备端获取结构化数据信息，解析对应字段和视频图像叠加渲染和展示。

优选的，所述采用结构化数据和视频流，实现当前课堂举手或者站立等较活跃互动场面进行精彩瞬间图片抓拍和视频录制。

优选的，所述智能处理装置采用基于深度学习推理、神经网络计算的智能硬件或者云平台实现和加持。

优选的，所述智能处理装置输出地结构化数据信息是以PROTOBUF或者JSON串等序列化技术方法实现。

优选的，所述人脸识别单元包括人脸检测、人脸特征值计算、人脸比对和学生底库管理等模块。

与现有技术相比，本发明的有益效果是：该在线课堂智能互动装置：