[发明专利]视频图像处理方法和装置

说明书

本申请提供了一种视频图像处理方法和装置，其中，上述方法包括如下步骤：获取当前帧视频图像；对当前帧视频图像进行图像分割，获得当前帧视频图像对应的第一掩膜图像；根据当前帧视频图像和上一帧视频图像确定当前帧视频图像的历史运动信息，并根据上一帧视频图像对应的第二掩膜图像和历史运动信息，获得当前帧视频图像对应的第三掩膜图像；根据历史运动信息计算获得融合权重，并根据融合权重对第一掩膜图像和第三掩膜图像进行加权融合，获得当前帧视频图像的融合掩膜图像。上述视频图像处理方法和装置，可以避免抖动及延迟问题，提高视频的稳定性和流畅性，提高运动跟踪的准确性。

技术领域

本申请涉及计算机视觉技术领域，特别是涉及一种视频图像处理方法和装置。

背景技术

随着各种视频软件应用的普及和发展，各种视频处理算法广泛地应用于各种视频图像的处理。其中，视频分割技术作为一种基础的视频处理手段，也得到了广泛的应用。

传统的视频分割技术通常采用图像分割的方法，即每张图像得到一个分割的掩膜。但由于图像前后帧可能不一致，这种分割方法往往会产生明显的抖动，导致视频的稳定性较差。

发明内容

基于此，有必要针对上述技术问题，提供一种视频图像处理方法和装置，以提高视频的稳定性及流畅性。

一种视频图像处理方法，所述方法包括如下步骤：

获取当前帧视频图像；

采用卷积神经网络对所述当前帧视频图像进行图像分割，获得所述当前帧视频图像对应的第一掩膜图像；

根据所述当前帧视频图像和所述当前帧视频图像的上一帧视频图像确定所述当前帧视频图像的历史运动信息，并根据所述上一帧视频图像对应的第二掩膜图像和所述当前帧视频图像的历史运动信息，获得所述当前帧视频图像对应的第三掩膜图像；

根据所述当前帧视频图像的历史运动信息计算获得融合权重，并根据所述融合权重对所述第一掩膜图像和所述第三掩膜图像进行加权融合，获得所述当前帧视频图像的融合掩膜图像。

在一个实施例中，所述的根据所述当前帧视频图像和所述当前帧视频图像的上一帧视频图像确定所述当前帧视频图像的历史运动信息的步骤包括：

根据所述当前帧视频图像和所述当前视频图像的上一帧视频图像确定所述当前帧视频图像的光流信息，其中，所述光流信息用于表征所述当前帧视频图像的历史运动信息，所述光流信息包括所述当前帧视频图像中每个像素的水平像素偏移量和垂直像素偏移量。

在一个实施例中，所述的根据所述上一帧视频图像对应的第二掩膜图像和所述当前帧视频图像的历史运动信息获得所述当前帧视频图像对应的第三掩膜图像的步骤包括：

分别将所述当前帧视频图像的每个像素的水平像素偏移量与所述第二掩膜图像的水平像素进行叠加，计算获得所述第三掩膜图像的水平像素；

分别将所述当前帧视频图像的每个像素的垂直像素偏移量和所述第二掩膜图像的垂直像素进行叠加，计算获得所述第三掩膜图像的垂直像素。

在一个实施例中，所述的根据所述当前帧视频图像的历史运动信息计算获得融合权重的步骤包括：

根据所述当前帧视频图像的光流信息、预设的第一参数和第二参数计算获得第一参考值；

将所述第一参考值和预设的第二参考值进行比较，将所述第一参考值和所述第二参考值中的最小值作为所述融合权重；

其中，所述第一参数和所述第二参数为常量，所述第一参考值和所述第二参考值均大于零，且小于1。

在一个实施例中，根据所述当前帧视频图像的光流信息、预设的第一参数和第二参数计算获得第一参考值的步骤包括：