[发明专利]一种教育视频与幻灯片同步方法

说明书

技术领域

本发明属于图像处理技术领域，更进一步涉及教育视频与幻灯片同步方法。

背景技术

在线学习或网络学习是一种通过应用信息科技和互联网技术进行内容传播和快速学习的方法，随着计算机和网络技术的快速发展，在线学习在远程教育中发挥着越来越重要的作用。其中教育视频能成为在线学习的重要素材，一部分原因要归功于多媒体技术的快速发展，它使得教育视频的制作、存储和传输变得相当简单，容易操作。但在检索和浏览教育视频中，通常会遇到教育视频中的关键信息模糊受损（视频中幻灯片模糊看不清），影响学习效率。

发明内容

本发明所要解决的技术问题是针对上述现有技术提供一种教育视频与幻灯片同步方法，该方法能在教育视频播放的同时，将视频内出现的幻灯片信息通过单独的播放窗口进行播放显示，并且播放显示的幻灯片内容与时刻与教育视频内出现的幻灯片的内容和时刻保持同步。

本发明解决上述技术问题所采用的技术方案为：一种教育视频与幻灯片同步方法，其特征在于：开设两个播放窗口，其中第一播放窗口用于播放教育视频，第二播放窗口用于播放幻灯片，通过如下步骤实现第一播放窗口内教育视频中涉及的幻灯片与第二播放窗口中播放的幻灯片进行同步：

步骤1、教育视频解压：对教育视频进行解压缩，解压缩时每隔1秒提取一个教育视频帧，得到教育视频帧集；

步骤2、原始幻灯片格式转换：将教育视频中播放的原始幻灯片由PPT格式或PDF格式转换为图像格式，每一页原始幻灯片得到一幅原始幻灯片图像，所有原始幻灯片图像集合在一起得到原始幻灯片图像集；

步骤3、幻灯片区域定位：

挑选出教育视频帧集中包含有幻灯片的教育视频帧，将这些包含有幻灯片的教育视频帧从教育视频帧集中分割出来，将分割出来的包含有幻灯片的教育视频帧称为幻灯片教育视频帧，找到幻灯片教育视频帧中幻灯片所有的区域，将幻灯片所在的区域另存为图像格式，将这些幻灯片教育视频帧中的幻灯片所在区域的图像称为待同步幻灯片图像；

步骤4、幻灯片镜头分割：根据步骤3得到的待同步幻灯片图像，将教育视频帧集中的幻灯片教育视频帧分割成多个镜头；

步骤5、提取关键帧：对已经分割的幻灯片镜头进行关键帧提取，即每一个幻灯片镜头下，提取其中待同步幻灯片图像内容不同的幻灯片教育视频帧，将这些提取出的待同步幻灯片图像内容不同的幻灯片教育视频帧称为关键幻灯片教育视频帧

步骤6、在原始幻灯片图像集中对关键幻灯片教育视频帧中的待同步幻灯片图像进行图像检索，找出相似度最高的原始幻灯片图像，然后在关键幻灯片教育视频帧播放的时刻，将找出的与该关键幻灯片教育视频帧中待同步幻灯片图像相似度最高的原始幻灯片图像在第二播放窗口内进行播放显示。

作为改进，所述t取值为0.5～1.5。

再改进，所述步骤3通过如下步骤对教育视频帧中幻灯片的区域进行定位：

步骤3-1、将每一幅教育视频帧转化到HSV颜色空间，获得其中的亮度通道；

步骤3-2、采用最大类间方差法，按照每一幅教育视频帧的灰度特性，将每一幅教育视频帧中幻灯片区域和背景区域区分开，如果无法区分幻灯片区域和背景区域，则该教育视频帧不包含有幻灯片，如果能区分幻灯片区域和背景区域，则该教育视频帧包含有幻灯片，该教育视频帧即为幻灯片教育视频帧，然后获取该幻灯片教育视频帧中的幻灯片区域；

步骤3-3、对步骤3-2中得到的幻灯片区域的二值图像进行开运算和孔洞填充操作，将幻灯片区域从背景中分离出来成为一个独立的区域，从而获得幻灯片区域的初始位置；

步骤3-4、利用Canny边缘检测算法，对步骤3-3中得到在初始位置内的幻灯片图像进行降噪，寻找初始位置内的幻灯片图像中的亮度梯度，在初始位置内的幻灯片图像中跟踪边缘，得到幻灯片区域的待确认的中间过渡位置；

步骤3-5、利用Hough变换的不受图像旋转特性，对在待确认的中间过渡位置内的幻灯片图像做两次Hough变换，分别检测出幻灯片图像处在水平位置上的线段和处在竖直位置上的线段；

步骤3-6，根据步骤3-4检测出的水平线段和竖直线段，组合出多个矩形，将多个矩形进行合并，合并后的矩形就是幻灯片所在的区域。

再改进，所述步骤4通过如下步骤对幻灯片镜头进行分割：

步骤4-1、将步骤3定位出来的待同步幻灯片图像进行分层网格划分，第0层为待同步幻灯片图像的原图像，第1层将待同步幻灯片图像的原图像以均匀网格划分为4块图像，第2层将待同步幻灯片图像的原图像以均匀网格划分为16块图像；