[发明专利]一种教育视频与幻灯片同步方法

权利要求书

1.一种教育视频与幻灯片同步方法，其特征在于：开设两个播放窗口，其中第一播放窗口用于播放教育视频，第二播放窗口用于播放幻灯片，通过如下步骤实现第一播放窗口内教育视频中涉及的幻灯片与第二播放窗口中播放的幻灯片进行同步：

步骤1、教育视频解压：对教育视频进行解压缩，解压缩时每隔1秒提取一个教育视频帧，得到教育视频帧集；

步骤2、原始幻灯片格式转换：将教育视频中播放的原始幻灯片由PPT格式或PDF格式转换为图像格式，每一页原始幻灯片得到一幅原始幻灯片图像，所有原始幻灯片图像集合在一起得到原始幻灯片图像集；

步骤3、幻灯片区域定位：

挑选出教育视频帧集中包含有幻灯片的教育视频帧，将这些包含有幻灯片的教育视频帧从教育视频帧集中分割出来，将分割出来的包含有幻灯片的教育视频帧称为幻灯片教育视频帧，找到幻灯片教育视频帧中幻灯片所有的区域，将幻灯片所在的区域另存为图像格式，将这些幻灯片教育视频帧中的幻灯片所在区域的图像称为待同步幻灯片图像；

步骤4、幻灯片镜头分割：根据步骤3得到的待同步幻灯片图像，将教育视频帧集中的幻灯片教育视频帧分割成多个镜头；

步骤5、提取关键帧：对已经分割的幻灯片镜头进行关键帧提取，即每一个幻灯片镜头下，提取其中待同步幻灯片图像内容不同的幻灯片教育视频帧，将这些提取出的待同步幻灯片图像内容不同的幻灯片教育视频帧称为关键幻灯片教育视频帧

步骤6、在原始幻灯片图像集中对关键幻灯片教育视频帧中的待同步幻灯片图像进行图像检索，找出相似度最高的原始幻灯片图像，然后在关键幻灯片教育视频帧播放的时刻，将找出的与该关键幻灯片教育视频帧中待同步幻灯片图像相似度最高的原始幻灯片图像在第二播放窗口内进行播放显示。

2.根据权利要求1所述的教育视频与幻灯片同步方法，其特征在于：所述t取值为0.5～1.5。

3.根据权利要求1所述的教育视频与幻灯片同步方法，其特征在于：所述步骤3通过如下步骤对教育视频帧中幻灯片的区域进行定位：

步骤3-1、将每一幅教育视频帧转化到HSV颜色空间，获得其中的亮度通道；

步骤3-2、采用最大类间方差法，按照每一幅教育视频帧的灰度特性，将每一幅教育视频帧中幻灯片区域和背景区域区分开，如果无法区分幻灯片区域和背景区域，则该教育视频帧不包含有幻灯片，如果能区分幻灯片区域和背景区域，则该教育视频帧包含有幻灯片，该教育视频帧即为幻灯片教育视频帧，然后获取该幻灯片教育视频帧中的幻灯片区域；

步骤3-3、对步骤3-2中得到的幻灯片区域的二值图像进行开运算和孔洞填充操作，将幻灯片区域从背景中分离出来成为一个独立的区域，从而获得幻灯片区域的初始位置；

步骤3-4、利用Canny边缘检测算法，对步骤3-3中得到在初始位置内的幻灯片图像进行降噪，寻找初始位置内的幻灯片图像中的亮度梯度，在初始位置内的幻灯片图像中跟踪边缘，得到幻灯片区域的待确认的中间过渡位置；

步骤3-5、利用Hough变换的不受图像旋转特性，对在待确认的中间过渡位置内的幻灯片图像做两次Hough变换，分别检测出幻灯片图像处在水平位置上的线段和处在竖直位置上的线段；

步骤3-6，根据步骤3-4检测出的水平线段和竖直线段，组合出多个矩形，将多个矩形进行合并，合并后的矩形就是幻灯片所在的区域。