[发明专利]听障生融合教育课堂辅助系统及装置

摘要

本发明涉及听障生融合教育课堂辅助系统及装置，包括面部运动数据采集模块、视频识别处理模块、语音数据采集模块、语音识别模块、同步处理模块、数据传输模块、显示模块、资源存储模块、资源获取模块、数据播放模块；本发明提供具有音、视频识别系统，同时加入资源存储模块、资源获取模块，能够辅助听障生在课堂内实时接收教师授课内容，同时也可适用于课后复习视频课件，是听障生融合教育的课堂辅助系统。

主权项

1.听障生融合教育课堂辅助系统及装置，其特征在于：包括面部运动数据采集模块、视频识别处理模块、语音数据采集模块、语音识别模块、同步处理模块、数据传输模块、显示模块、资源存储模块、资源获取模块、数据播放模块；所述面部运动数据采集模块用于采集说话人面部运动特征数据；所述视频识别处理模块用于视频数据传输、视频数据接收、视频数据处理；所述语音数据采集模块用于采集说话人语音数据；所述语音识别模块用于将语音信息转至文字信息；所述同步处理模块用于将文字、语音、视频信息同步传递；所述数据传输模块用于将已同步的信息实时不间断的传递；所述资源存储模块用于将以获取的音频、视频、文字信息进行存储；所述资源获取模块包括视频提取单元、协议分析单元、媒体解码单元、用户管理单元，对已存储的信息进行提取；所述数据播放模块用于对资源存储模块中存储的音频、视频、文字信息按照各协议划分进行播放；所述显示模块用于显示说话人音频、视频、文字可视化信息。