[发明专利]视频的特殊效果检测装置、特殊效果检测方法、特殊效果检测程序及视频再生装置

说明书

技术领域

本发明涉及一种检测视频中所包含的特殊效果的视频的特殊效果检测装置、特殊效果检测方法及特殊效果检测程序，特别地涉及一种能够检测根据视频的空间的渐次变化的视频切换的视频的特殊效果检测装置、特殊效果检测方法及特殊效果检测程序。根据视频的空间的渐次变化的视频切换例如是擦除和DVE(数字视频特效)。

背景技术

视频的特殊效果是视频切换的一种。在视频的特殊效果中，进行切换前后的视频一面慢慢地改变空间的占有比例，一面切换的这种渐次变化。在视频的特殊效果中，有擦除和DVD(Digital Video Effect：数字视频特效)。图1(A)、(B)是分别表示擦除的例子的说明图。图2(A)～(I)是分别表示DVE的例子的说明图。

如图1所例示的，在擦除中，切换前后的视频的位置是固定的，使显示各视频的区域慢慢地变化，切换画面。如图2所例示的，在DVE中，一个视频的位置是固定的，以在其上重叠的形态，一面伴随另一个视频平行移动、放大缩小、旋转、扭转等的图像转换，一面出现或消失，切换画面。无论哪一个特点都在于，切换前后的视频一面在空间上共存，一面切换画面。此外，无论哪一个，切换的模式是无数的。

与作为通常多用的瞬间的视频切换的镜头转换不同，视频的特殊效果是视频的编辑人员有意的插入的视频切换。视频的特殊效果，被利用在视频的意义的重要之处、和编辑人员想特别赋予印象之处。例如，利用于新的拐角和话题的开始点、和场面的转换点等中。因此，通过检测出视频的特殊效果，理解视频的内容和构造之后，就能够取得重要的信息。

在文献中记载了检测擦除和DVE等特殊效果的方法。

在特开平8-237549号公报(段落0011-0016)和特开2005-237002号公报(段落0031-0035)中，记载着使用邻接帧间的特征量的差分值(帧间差分值)检测根据含擦除的渐次变化的视频切换的方法。在这些中记载的方法中，检测帧的特征量缓慢地变化的区间。在特开平8-237549号公报中记载的方法中，在帧间差分值成为验证某一缓慢变化的阈值以上的帧延续、且累积的帧间差分值成为某另一大的值以上的情况下，检测根据渐次变化的视频切换。作为帧间差分值，使用像素间的辉度值的变化量。在特开2005-237002号公报中记载的方法中，在帧间差分值成为验证某一缓慢变化的阈值以上的帧延续、且在其前后的期间帧间差分值成为某一阈值以下的帧延续的情况下，检测出擦除。

在特开平7-288840号公报(段落011)和特开平11-252501号公报(段落0012-0020)中，记载着检测擦除的方法。擦除具有所谓切换后的视频慢慢地替换切换前的视频的区域、最终切换后的视频替换切换前的视频的整个区域的性质。在这些中记载的方法中，使用擦除具有的性质检测同样变化的擦除。根据邻接帧间的像素间的差分值等，求各帧中的图像的变化区域。用连续的多个帧的图像变化区域的逻辑和来评价得到的综合的图像变化区域，检测擦除。在特开平11-252509号公报(段落0053-0057)中也记载着检测擦除的方法。在特开平11-252509号公报中记载的方法中，一旦预测误差的帧平均变大，就判定为擦除的可能性高。

河合吉彦、马场口登、北桥忠宏在“着眼于广播型运动视频中的数字视频特效的重放场景检测的方法”(电子信息通信学会论文誌D-II、Vol.J84-D-II、No.2、pp.432-435、2001年2月)中公开有检测DVE的方法。在“着眼于广播型运动视频中的数字视频特效的重放场景检测的方法”中记载的方法中，预先登记DVE的图形，通过比较预先登记的DVE的图形和视频，来检测出类似的图形作为DVE。

但是，在上述文献中记载的现有的方法，无法高精度地检测视频的特殊效果，同时不依赖于图形而通用且不会误检测特殊效果以外的视频变化。特殊效果以外的视频变化，例如是拍摄全景、图像电子放大等照相机运动，视频内的物体的运动等的渐次变化。在特开平8-237549号公报和特开平11-252501号公报中记载的方法，虽然不依赖于特殊效果的模式而能通用地应用，但由于使用单纯的帧的特征量的比较，所以不能区别特殊效果的视频变化和特殊效果以外的视频变化。原因是即便在特殊效果以外的视频变化中，也与特殊效果同样，帧的特征量缓慢地变化。由于不能区别特殊效果的视频变化和特殊效果以外的视频变化，所以存在所谓多发生错误检测特殊效果以外的视频变化的问题。