[发明专利]板书抓拍方法、装置、电子设备及可读存储介质

说明书

本申请公开了一种板书抓拍方法、装置、电子设备及可读存储介质，所述板书抓拍方法包括：获取目标区域的全景画面，对所述全景画面进行识别，得到板书区域检测结果以及人形检测结果；根据所述板书区域检测结果从所述全景画面中裁切出板书区域，并根据所述板书区域检测结果以及所述人形检测结果，判断板书区域是否被遮挡；当所述板书区域未被遮挡时，根据所述板书区域内的画面，确定板书区域图像数据；当所述板书区域被部分遮挡时，更新未被遮挡的部分区域的图像帧，生成所述板书区域图像数据。本申请解决了板书抓拍系统复杂度高的技术问题。

技术领域

本申请涉及多媒体教学领域，尤其涉及一种板书抓拍方法、装置、电子设备及可读存储介质。

背景技术

近年来线上教育系统的应用越来越广泛，主要是通过对课堂场景的拍摄录制，让广大的学习者通过线上方式进行网上学习，其中线上多媒体教学中黑板上的板书内容输出是重中之重。板书内容可以通过板书快照与板书特写视频的方式直观地展示给学员，不过由于教师在板书前面的不断活动，会给板书内容的输出带来一定的干扰。目前主要通过在黑板上方安装板书摄像机，拍摄黑板画面进行梯形校正后得到正常的板书画面，不过这种方式需要安装多个独立的摄像机来获取全景画面以及板书画面。另外也有使用电子白板或电子黑板取代传统黑板的方法，实现了手动触发板书快照的功能，以上板书抓拍方式都存在硬件组成复杂，从而导致板书抓拍系统复杂度偏高。

发明内容

本申请的主要目的在于提供一种板书抓拍方法、装置、电子设备及计算机可读存储介质，旨在解决板书抓拍系统复杂度高的技术问题。

为实现上述目的，本申请提供一种板书抓拍方法，所述板书抓拍方法包括：

获取目标区域的全景画面，对所述全景画面进行识别，得到板书区域检测结果以及人形检测结果；

根据所述板书区域检测结果从所述全景画面中裁切出板书区域，并根据所述板书区域检测结果以及所述人形检测结果，判断板书区域是否被遮挡；

当所述板书区域未被遮挡时，根据所述板书区域内的画面，确定板书区域图像数据；

当所述板书区域被部分遮挡时，更新未被遮挡的部分区域的图像帧，生成所述板书区域图像数据。

可选地，所述板书区域图像数据包括板书区域快照，所述人形检测结果包括教师动作检测信息，所述当所述板书区域未被遮挡时，根据所述板书区域内的画面，确定板书区域图像数据的步骤包括：

当所述板书区域未被遮挡时，基于所述教师动作检测信息判断在上一板书区域快照的时间点与当前时间点之间是否存在板书动作，其中，所述上一板书区域快照为已存储的板书区域快照中对应的时间点与当前时间点最近的板书区域快照；

若是，则对所述板书区域内的画面进行抓拍，得到板书区域快照，并存储所述板书区域快照。

可选地，所述板书区域图像数据包括板书区域快照，所述当所述板书区域未被遮挡时，根据所述板书区域内的画面，确定板书区域图像数据的步骤包括：

当所述板书区域未被遮挡时，对比当前板书区域图像与上一板书区域快照，得到图像差异值，其中，所述上一板书区域快照为已存储的板书区域快照中对应的时间点与当前时间点最近的板书区域快照；

判断所述图像差异值是否大于预设差异阈值；

若是，则将所述当前板书区域图像置为板书区域快照，并存储所述板书区域快照。

可选地，所述板书区域图像数据包括板书视频流数据，所述当所述板书区域被部分遮挡时，根据所述板书区域检测结果从所述全景画面中裁切出板书区域，并更新未被遮挡的部分区域的图像帧，生成所述板书区域图像数据的步骤包括：

当所述板书区域被遮挡时，分析所述人形检测结果，得到人形遮挡区域；