[发明专利]视频去痕方法和视频去痕装置

权利要求书

1.一种视频去痕方法，其特征在于，包括：

获取视频的当前帧图像和去痕区域掩膜；

基于所述当前帧图像和所述去痕区域掩膜，利用图像去痕网络，获得所述当前帧图像的第一去痕结果图像；

获取所述视频的所述当前帧图像的前一帧图像的去痕结果图像；

对所述当前帧图像的第一去痕结果图像和所述前一帧图像的去痕结果图像进行融合，获得所述当前帧图像的第二去痕结果图像，作为所述当前帧图像的最终去痕结果图像，

其中，所述前一帧图像的去痕结果图像包括所述前一帧图像的第一去痕结果图像和第二去痕结果图像，所述前一帧图像的第一去痕结果图像是通过基于所述前一帧图像和所述去痕区域掩膜，利用所述图像去痕网络而获得的，所述前一帧图像的第二去痕结果图像是通过对所述前一帧图像的第一去痕结果图像和所述前一帧图像的前一帧图像的去痕结果图像进行融合而获得的。

2.如权利要求1所述的视频去痕方法，其特征在于，所述去痕区域是所述视频的图像中的特定矩形区域，其中，所述特定矩形区域以所述视频的图像的待去痕图案的中心为中心点且以待去痕图案最长边的两倍为边长。

3.如权利要求1所述的视频去痕方法，其特征在于，所述对所述当前帧图像的第一去痕结果图像和所述前一帧图像的去痕结果图像进行融合，包括：

对所述当前帧图像的第一去痕结果图像和所述前一帧图像的去痕结果图像进行光流计算，获得相邻帧光流；

基于获得的相邻帧光流对所述当前帧图像的第一去痕结果图像和所述前一帧图像的去痕结果图像进行采样，获得相邻帧对齐图像；

对所述当前帧图像的第一去痕结果图像和所述相邻帧对齐图像的去痕区域像素的每个像素进行融合。

4.如权利要求3所述的视频去痕方法，其特征在于，所述对所述当前帧图像的第一去痕结果图像和所述相邻帧对齐图像的去痕区域像素的每个像素进行融合，包括：

针对所述去痕区域像素的每个像素，计算所述当前帧图像的第一去痕结果图像的像素值和所述相邻帧对齐图像的像素值的统计值，作为该像素的像素值。

5.如权利要求3所述的视频去痕方法，其特征在于，

所述对所述当前帧图像的第一去痕结果图像和所述前一帧图像的去痕结果图像进行光流计算，获得相邻光流，包括：

对所述当前帧图像的第一去痕结果图像和所述前一帧图像的第一去痕结果图像进行光流计算，获得第一相邻光流，

对所述当前帧图像的第一去痕结果图像和所述前一帧图像的第二去痕结果图像进行光流计算，获得第二相邻光流；

所述基于获得的相邻帧光流对所述当前帧图像的第一去痕结果图像和所述前一帧图像的去痕结果图像进行采样，获得相邻帧对齐图像，包括：

基于第一相邻光流对所述当前帧图像的第一去痕结果图像和所述前一帧图像的第一去痕结果图像进行采样，获得第一相邻帧对齐图像，

基于第二相邻光流对所述当前帧图像的第一去痕结果图像和所述前一帧图像的第二去痕结果图像进行采样，获得第二相邻帧对齐图像；

所述对所述当前帧图像的第一去痕结果图像和所述相邻帧对齐图像的去痕区域像素的每个像素进行融合，包括：

对所述当前帧图像的第一去痕结果图像、第一相邻帧对齐图像和第二相邻帧对齐图像的去痕区域像素的每个像素进行融合。

6.如权利要求5所述的视频去痕方法，其特征在于，所述对所述当前帧图像的第一去痕结果图像、第一相邻帧对齐图像和第二相邻帧对齐图像的去痕区域像素的每个像素进行融合，包括：

针对所述去痕区域像素的每个像素，计算所述当前帧图像的第一去痕结果图像的像素值、第一相邻帧对齐图像的像素值和第二相邻帧对齐图像的像素值的中位数。