[发明专利]图像处理方法和装置

权利要求书

1.一种图像处理方法，其特征在于，包括：

获取多个视频帧，所述多个视频帧是从不同角度对同一场景采集得到的；

根据所述多个视频帧之间的对应像素点，确定所述每个视频帧的深度图；

根据所述多个视频帧的深度图，对所述多个视频帧的背景缺失区域进行补全，得到所述多个视频帧的补全视频帧以及所述多个补全视频帧的深度图；

根据所述多个视频帧中每个视频帧与所述每个视频帧的补全视频帧在背景缺失区域的遮挡关系，生成所述每个视频帧的阿尔法图；

根据所述多个视频帧、所述多个视频帧的补全视频帧，以及所述多个视频的阿尔法图，生成指定浏览视角下的浏览帧；

其中，所述根据所述多个视频帧、所述多个视频帧的补全视频帧，以及所述多个视频的阿尔法图，生成指定浏览视角下的浏览帧，包括：

获取所述浏览视角与所述多个视频帧的采集视角之间的位置关系；

根据所述位置关系，从所述多个视频帧中选择目标视频帧；

将所述目标视频帧和所述目标视频帧的补全视频帧的像素映射至所述浏览视角下；

利用所述目标视频帧的阿尔法图，对映射至所述浏览视角下的像素进行混合，生成所述浏览帧。

2.根据权利要求1所述的方法，其特征在于，所述根据所述位置关系，从所述多个视频帧中选择目标视频帧，包括：

根据所述位置关系，从所述多个视频帧中选择目标视频帧，其中，在所述多个视频帧中，所述目标视频帧的采集视角与所述浏览视角差值最小的。

3.根据权利要求1或2所述的方法，其特征在于，所述根据所确定的所述多个视频帧的深度图，对所述多个视频帧的背景缺失区域进行补全，得到所述多个视频帧的补全视频帧以及所述多个补全视频帧的深度图，包括：

从所述多个视频帧中确定待补全帧以及所述待补全帧的多个投影帧，所述待补全帧为所述多个视频帧的任一帧，所述多个投影帧包括所述待补全帧中的背景缺失区域；

确定所述待补全帧的深度图与所述每个投影帧的深度图之间的像素映射关系；

根据多个像素映射关系，利用所述多个投影帧对所述待补全帧进行补全，得到所述补全帧以及所述补全帧的深度图，其中，所述待补全帧的第一像素对应于所述每个投影帧的第二像素，当所述第一像素与所述第二像素之间的深度差大于预设阈值时，设置补全帧的像素具有所述第二像素的颜色通道值和深度通道值，

当所述第一像素与所述第二像素之间的深度差不大于所述预设阈值时，设置所述补全帧的像素具有所述第一像素的颜色通道值和深度通道值，所述补全帧的深度图与所述补全帧之间的对应像素具有相同的深度通道值。

4.根据权利要求1或2所述的方法，其特征在于，在所述根据所述多个视频帧中每个视频帧与所述每个视频帧的补全视频帧在背景缺失区域的遮挡关系，生成所述每个视频帧的阿尔法图之后，还包括：

根据所述遮挡关系指示的补全区域的边界，通过设定大于零小于一的阿尔法通道值，进行高斯模糊。

5.根据权利要求4所述的方法，其特征在于，还包括：

在所述目标视频帧中，确定第一像素窗口，所述第一像素窗口包括目标像素，所述第一像素窗口的宽度大于两个像素宽度，

从所述第一像素窗口内的多个像素中，确定所述多个像素中每个像素属于前景像素或背景像素，其中所述前景像素的深度小于所述背景像素的深度，

当所述多个像素中属于所述前景像素的像素不在所述补全区域中时，将所述像素确定为补全扩充区域的像素，所述补全扩充区域包括所述补全区域，

所述根据所述遮挡关系指示的补全区域的边界，通过设定大于零小于一的阿尔法通道值，对所述目标视频帧进行高斯模糊，包括：

对所述补全扩充区域的边界，通过设定大于零小于一的阿尔法通道值，进行高斯模糊。