[发明专利]视频处理方法、装置、设备、介质及程序产品

权利要求书

1.一种视频处理方法，其特征在于，包括：

响应于触发指令，获取目标图像，所述目标图像为参考图像的前一视频帧，所述参考图像为图像传感器当前所获取到的视频帧；

利用所述目标图像中的背景区域对所述参考图像中的目标区域进行补全填充，以生成处理后图像，所述目标区域为目标对象在所述参考图像中所覆盖的区域；

将所述处理后图像作为当前视频帧进行显示，所述处理后图像为所述目标对象至少部分从所述参考图像中移除后的图像。

2.根据权利要求1所述的视频处理方法，其特征在于，所述利用所述目标图像中的背景区域对所述参考图像中的目标区域进行补全填充，包括：

确定目标背景中每个像素相对于参考背景中对应像素的光度误差，所述目标背景中每个像素对应的网格顶点按照相似变换所确定的方格变形误差，以及所述目标背景中每个像素对应的网格顶点位移正则化的网格顶点惯性误差，其中，所述目标背景对应所述目标图像中的背景区域，所述参考背景对应所述参考图像中的背景区域；

根据所述光度误差、所述方格变形误差以及所述网格顶点惯性误差确定总体代价函数；

根据所述总体代价函数以及预设优化算法确定所述目标背景中每个像素对应的网格顶点的位移向量，以根据所述位移向量对所述目标图像进行调整后生成优化目标图像；

计算所述参考图像相对于所述优化目标图像的稠密光流；

根据所述稠密光流对所述参考图像中的所述目标区域进行补全填充。

3.根据权利要求2所述的视频处理方法，其特征在于，在所述确定目标背景中每个像素相对于参考背景中对应像素的光度误差，所述目标背景中每个像素对应的网格顶点按照相似变换所确定的方格变形误差，以及所述目标背景中每个像素对应的网格顶点位移正则化的网格顶点惯性误差之前，还包括：

确定所述目标图像对应的目标前景，以及所述参考图像对应的参考前景，所述目标图像包括所述目标前景以及所述目标背景，所述参考图像包括所述参考前景以及所述参考背景；

分别对所述目标图像、所述目标前景、所述参考图像以及所述参考前景构造网格，以生成目标图像网格、目标前景网格、参考图像网格以及参考前景网格。

4.根据权利要求3所述的视频处理方法，其特征在于，所述分别对所述目标图像、所述目标前景、所述参考图像以及所述参考前景构造网格，以生成目标图像网格、目标前景网格、参考图像网格以及参考前景网格，包括：

分别对所述目标图像、所述目标前景、所述参考图像以及所述参考前景构造图像金字塔，以生成层数相同的目标图像金字塔、目标前景金字塔、参考图像金字塔以及参考前景金字塔；

分别对所述目标图像金字塔、所述目标前景金字塔、所述参考图像金字塔以及所述参考前景金字塔中的各个图像层构造网格，其中，各个图像金字塔中对应层级的网格形状与尺度相同。

5.根据权利要求4所述的视频处理方法，其特征在于，所述确定目标背景中每个像素相对于参考背景中对应像素的光度误差，所述目标背景中每个像素对应的网格顶点按照相似变换所确定的方格变形误差，以及所述目标背景中每个像素对应的网格顶点位移正则化的网格顶点惯性误差，包括：

计算第一目标图像层上各个像素的亮度梯度，并按照预设步长遍历所述第一目标图像层上的各个像素，以确定第一目标样本集，其中，所述第一目标样本集中的像素属于第一目标背景层，且所对应的亮度梯度大于预设第一阈值，所述第一目标图像层与所述第一目标背景层位于图像金字塔中的相同层级；

确定所述第一目标图像层上各个像素相对于所述参考背景中对应像素的光度误差，所述第一目标图像层上各个像素对应的网格顶点按照相似变换所确定的方格变形误差，以及所述第一目标图像层上各个像素对应的网格顶点位移正则化的网格顶点惯性误差。