[发明专利]跟踪对象确定设备、跟踪对象确定方法和跟踪对象确定程序

说明书

技术领域

本发明涉及跟踪对象确定设备、跟踪对象确定方法和跟踪对象确定程序，更具体地，涉及用于确定出现在视频中的对象是否是摄像者所跟踪的对象的跟踪对象确定设备、跟踪对象确定方法和跟踪对象确定程序。

背景技术

跟踪对象是被捕获的连续出现在屏幕上并且认为是摄像者所关注的运动对象。因此，对跟踪对象的检测需要产生概要视频或提取关键帧，以用于识别视频中的重要对象。

在专利文献1(日本专利公开No.08-191411)中记载了跟踪对象确定设备的一个示例。

专利文献1中记载的方法是：基于运动区域的分布，计算视频区间中跟踪对象的存在可能性，在该视频区间中沿固定方向运动的摄像机执行拍摄，运动区域是具有与摄像机的运动所产生的运动矢量不同的矢量的图像区域。在该方法中，通过使用运动区域中多个像素所获得的运动区域的集中程度、聚集程度、重心位置和分散程度或者视频区间中包括运动区域在内的多个帧的速率所获得的静止程度，来确定“总是持续存在的运动区域集合”是跟踪对象。

如图23所示，用于确定跟踪对象的结构包括：运动矢量检测单元300，检测关于视频的每一帧的运动矢量；摇摄区间检测单元301，基于视频的每一帧的运动矢量，检测摇摄区间的起点和终点；运动区域信息检测单元302，检测作为预测图像的运动补偿预测图像与当前帧之间相关程度较低的区域，作为运动区域，以提取区域的分布信息，预测图像是从过去的视频帧平行移动了预定量的运动矢量的图像；以及场景确定单元303，基于在每个摇摄区间检测到的运动区域的分布信息，来确定该区间与跟踪对象的场景相对应。

专利文献1：日本专利公开No.H08-191411

非专利文献1：Yousuke Torii，Seiichi Konya和Masashi Morimoto，“Extracting follow and close-up shots from moving images”，MIRU2005，pp.24-31

非专利文献2：Yoshio Iwai，Shihong Lao，Osamu Yamaguchi，Takatsugu Hirayama，“A Survey on Face Detection and Face Reconition”，IPSJ SIG Technical Reports(CVIM-149)，2005，pp.343-368

现有技术方法的第一个问题是在摄像机无法以与运动对象几乎相同的速度运动时，无法确定运动对象是跟踪对象。

在例如由于拍摄镜头较短从而拍摄在摄像机的移动速率将要等于运动对象的移动速率之前结束的情况下，在由于运动对象随机运动而使得摄像者无法预测运动对象的移动目的地的情况下，或者在摄像机移动速率随着运动对象运动而改变的情况下(例如在长焦摄像机进行拍摄的情况下)，无法确定运动对象是跟踪对象。

其原因在于，根据运动区域的分布状态来确定运动对象是否是要跟踪的对象，该运动区域是具有与摄像机的运动所产生的运动矢量不同的运动矢量的图像区域。因此，当由于摄像机的运动与运动对象的移动速率不同，运动区域的分布无法满足“总是持续出现”的属性时，无法确定作为运动区域集合的运动对象是跟踪对象。

现有技术方法的第二个问题是在以固定方向捕获的视频区间的终点之前无法判断运动对象是跟踪对象。

其原因在于，由于根据可以在视频区间中稳定地跟踪运动对象的多个帧的速率来确定运动对象是否是要跟踪的对象，所以除非获得了视频区间的长度，否则无法确定运动对象是跟踪对象。

发明内容

本发明的目的是确定出现在视频中的运动对象是摄像者要跟踪和捕获的对象。

根据本发明的第一示例性方面，跟踪对象确定设备包括：单元，基于由运动对象的运动矢量所确定的运动状态发生改变的时间与由摄像机运动的运动矢量所确定的拍摄状态发生改变的时间之间的时间差，确定所述运动对象是否为摄像者所跟踪。

根据本发明的第二示例性方面，跟踪对象确定方法包括：基于由运动对象的运动矢量所确定的运动状态发生改变的时间与由摄像机运动的运动矢量所确定的拍摄状态发生改变的时间之间的时间差，确定所述运动对象是否为摄像者所跟踪。

根据本发明的第三示例性方面，跟踪对象确定程序使计算机执行以下处理：基于由运动对象的运动矢量所确定的运动状态发生改变的时间与由摄像机运动的运动矢量所确定的拍摄状态发生改变的时间之间的时间差，确定所述运动对象是否为摄像者所跟踪。