[发明专利]一种视频摘要的生成方法

摘要

的生成方法申请(专利)号CN201510098645.8

主权项

一种视频摘要的生成方法，其特征在于，该视频摘要的生成方法分为两部分：在线视频分析部分和离线摘要生成部分，包括如下步骤：A)获取实时视频数据或回放录像视频数据进行背景建模，并利用所述背景建模得到的结果提取出当前图像的运动目标；B)对当前运动目标进行跟踪匹配得到其运动轨迹，并将所述当前运动目标的轨迹信息保存到硬盘，同时将更新的背景建模背景的图像信息以及位置信息保存到硬盘；所述轨迹信息包括位置信息和图像信息；将在线视频分析部分生成的当前运动目标的轨迹信息以及背景信息持久化保存到本地硬盘，以作为离线摘要生成部分的数据源；C)读取运动目标的位置信息，过滤运动目标并保留位于用户指定区域内的运动目标；D)根据所述运动目标的位置信息对所述位于用户指定区域内的运动目标进行分组得到多个目标组；用Astart和Aend表示轨迹A在原始频中的起始帧位置，用Bstart和Bend表示轨迹B在原始频中的起始帧位置，假如轨迹A比轨迹B先出现，轨迹分组规则如下：如果Aend>Bstart，即当轨迹B出现在轨迹A消失之前，此时轨迹A与轨迹B归为一组；或者，如果Aend<Bstart但Aend+5>Bstar且轨迹A最后一张图像与轨迹B第一张图像有交叉面积，则同样把轨迹A与轨迹B归为一组；E)对所有目标组进行位置排列，计算出各个目标组在摘要视频中的出现顺序；F)根据各个目标组生成的顺序，依次读取相应的图像数据粘贴到对应的背景图片上生成摘要视频；所述步骤B)进一步包括：B1)使用最近邻算法对连续图像中的同一运动目标进行跟踪；轨迹跟踪包括轨迹开始、轨迹关联和轨迹消失三个阶段；前一帧图像中有a和b两个运动目标，它们的面积分别为Sa_pre以及Sb_pre，当前帧有三个运动目标c、d和e，它们的面积分别为Sc_cur、Sd_cur、Se_cur，此时分别计算运动目标c、d、e与a、b的交叉面积Sac、Sad、Sae、Sbc、Sbd、Sbe，交叉面积越大，代表目标位置越接近，目标关联性也就更大，取Sac、Sad、Sae中值最大者以及Sbc、Sbd、Sbe中值最大者，当Sac和Sbd分别最大，则此时a跟c进行关联，b跟d进行关联；而e则作为一条新的轨迹的开始；当Sac和Sbc分别最大，则a与b都同时与c相关联，此时分别计算a、b、c颜色直方图并进行直方图匹配，匹配度较高者与c进行关联；当Sac、Sad、Sae三个值都为0时，表示a没能与任何目标关联，此时a作为轨迹消失点；B2)判断运动目标的运动轨迹跟踪是否结束，如是，执行步骤B3)；否则，执行步骤B4)；B3)保存所述运动目标的运动轨迹信息；B4)判断所述运动目标停留在最后位置是否超过设定帧数，如是，将其更新为背景，并返回步骤B3)；否则，返回步骤A)。