[发明专利]一种多信息融合的帧率上变换运动估计方法及系统

摘要

本发明公开一种多信息融合的帧率上变换运动估计方法及系统，方法步骤为：读取前后两帧图像，分别对其进行降采样，对降采样的图像进行基于光流法的运动估计，对原始图像进行块匹配的运动估计，提取前后两帧图像的SIFT特征，计算特征向量并进行特征匹配，得到特征匹配的运动矢量，对块匹配运动矢量、特征匹配运动矢量和光流法运动矢量进行融合，运动矢量的传递。本发明相对比传统基于块匹配的运动估计算法，精度提升明显。针对一般的光流估计算法，在小物体运动矢量以及运动边界矢量保持上具有更好的性能。

主权项

1.一种多信息融合的帧率上变换运动估计方法，其特征在于，包括如下步骤：/n步骤一：从高清视频流中读取连续两帧图像；/n步骤二：对步骤一的图像数据进行降采样；/n步骤三：对步骤二中连续两帧数据进行基于光流法的运动估计，得到光流法运动矢量；/n步骤四：对步骤一中连续两帧图像数据进行基于块匹配的运动估计，得到块匹配运动矢量；/n步骤五：对步骤一中连续两帧图像数据进行SIFT特征提取，并计算每一个特征的特征矢量，并进行特征匹配，得到对应的特征运动矢量；/n步骤六：将步骤四得到的块匹配运动矢量、步骤五得到的特征运动矢量和步骤三得到的光流法运动矢量进行融合，得到融合后的运动矢量场；/n步骤七：对步骤六得到的融合后的运动矢量场采用运动矢量传递的方式进行修正；/n步骤八：回到步骤一，读取下两帧图像；/n上述步骤六中，特征运动矢量、块匹配运动矢量矢量与光流法运动矢量融合，步骤为：/n6.1读取一尺寸的光流法运动矢量场vo，块匹配运动矢量场vb和特征匹配矢量场vf，并且建立同等尺寸的融合后的矢量场vm；/n6.2按照从左到右，从上到下的扫描顺序，从左上开始，逐块扫描；/n6.3当前的扫描位置为p，判断当前位置处特征匹配矢量场vf是否存在对应的运动矢量，如果不存在，执行步骤6.4，否则执行步骤6.5；/n6.4计算块匹配运动矢量、光流法运动矢量在当前位置处矢量对应的绝对值误差，假设运动矢量为v，绝对值误差sad＝|f(p)–f(p+v)|，绝对值误差最小的矢量为当前位置的最优运动矢量，存入vm中的对应位置；/n6.5计算块匹配运动矢量、光流法运动矢量以及特征匹配矢量在当前位置处矢量对应的绝对值误差，绝对值误差与6.4中的定义相同，对应最小绝对值误差的运动矢量为最优运动矢量，存入vm中的对应位置；/n6.6扫描全部位置，得到最终融合后的运动矢量场vm。/n