[发明专利]一种基于视点间关系的多视点视频帧插入方法

摘要

本发明一种基于视点间关系的多视点视频帧插入方法，首先，利用单向运动估计算法进行前向和后向运动估计，获取前向运动向量场和后向运动向量场；其次，根据深度信息检测出上一帧图像和当前帧图像中遮挡图像块，并进一步将遮挡图像块分成覆盖型图像块和非覆盖型图像块；然后，利用多视点视频视点间的关系进行遮挡图像块的处理；最后，对插入帧中的每个图像块进行运动向量分配，并利用双向运动补偿实现帧插入。本发明充分考虑多视点视频中不同视点在空间上的关系，利用这种空间关系解决视频帧插入中遮挡区域处理这一关键问题，减弱现有的二维视频和三维视频帧插入方法中存在的前景物体边缘模糊现象，从而明显提升了插入帧的视觉质量。

主权项

一种基于视点间关系的多视点视频帧插入方法，其特征是：包括以下步骤：（1）运动估计：根据上一帧图像和当前帧图像，分别以当前帧和上一帧图像为参考帧，利用单向运动估计算法进行运动向量估计，分别得到前向运动向量场和后向运动向量场；（2）遮挡检测：基于所述前向运动向量场和后向运动向量场，利用深度信息检测出上一帧图像中的遮挡图像块和当前帧图像中的遮挡图像块，并将这些遮挡图像块分成覆盖型图像块和非覆盖型图像块两类；（3）遮挡区域处理：利用多视点视频视点间的关系，采用取深度值最小的参考像素的赋值给虚拟视点像素的方法生成背景可见的虚拟视点视频帧，进行遮挡图像块的处理；（4）运动向量分配和帧插入：对插入帧中的每个图像块进行运动向量分配，利用双向运动补偿进行插入帧中图像块的重建，实现帧插入。