[发明专利]一种深度图像编码方法

摘要

本发明公开了一种深度图像编码方法，其根据深度失真对虚拟视点图像绘制的影响，并结合人眼的视觉特性得到原始左视点深度图像的最大可容忍失真分布图像，然后通过基于深度图像绘制的方法，得到原始右视点深度图像的绘制图像，接着根据最大可容忍失真分布图像和设定的编码预测结构，对原始左视点深度图像进行编码，得到解码后的左视点深度图像，再根据设定的编码预测结构对原始右视点深度图像与其绘制图像的残差图像进行编码，得到解码后的残差图像，最后根据解码后的右视点深度图像的绘制图像和解码后的残差图像，得到解码后的右视点深度图像的重构图像，优点是本发明方法在保证虚拟视点图像绘制性能的基础上，大大提高了深度图像的编码效率。

主权项

1.一种深度图像编码方法，其特征在于它具体包括以下步骤：①将外部立体视频捕获工具捕获得到的未经处理的且颜色空间为YUV的彩色立体视频及其对应的深度立体视频定义为原始三维立体视频，该原始三维立体视频由原始左视点彩色图像、原始右视点彩色图像、原始左视点深度图像和原始右视点深度图像组成，将t时刻的原始左视点彩色图像记为将t时刻的原始右视点彩色图像记为将t时刻的原始左视点深度图像记为将t时刻的原始右视点深度图像记为其中，i＝1,2,3分别表示YUV颜色空间的三个分量，YUV颜色空间的第1个分量为亮度分量并记为Y、第2个分量为第一色度分量并记为U及第3个分量为第二色度分量并记为V，(x,y)表示彩色图像和深度图像中的像素点的坐标位置，1≤x≤W，1≤y≤H，W表示彩色图像和深度图像的宽度，H表示彩色图像和深度图像的高度，表示t时刻的原始左视点彩色图像中坐标位置为(x,y)的像素点的第i个分量的值，表示t时刻的原始右视点彩色图像中坐标位置为(x,y)的像素点的第i个分量的值，表示t时刻的原始左视点深度图像中坐标位置为(x,y)的像素点的深度值，表示t时刻的原始右视点深度图像中坐标位置为(x,y)的像素点的深度值；②利用人类视觉对背景光照和纹理的视觉掩蔽效应，提取出t时刻的原始左视点彩色图像的最小可察觉变化步长图像，记为其中，表示中坐标位置为(x,y)的像素点的最小可察觉变化步长值；③根据t时刻的原始左视点彩色图像的最小可察觉变化步长图像提取出t时刻的原始左视点深度图像的最大可容忍失真分布图像，记为其中，表示中坐标位置为(x,y)的像素点的最大可容忍失真值；④采用基于深度图像绘制的方法，将t时刻的原始左视点深度图像从左视点投影到右视点，得到t时刻的原始右视点深度图像的绘制图像，记为其中，表示t时刻的原始右视点深度图像的绘制图像中坐标位置为(x,y)的像素点的深度值；⑤计算t时刻的原始右视点深度图像与t时刻的原始右视点深度图像的绘制图像的残差图像，记为将中坐标位置为(x,y)的像素点的像素值记为EtR(x,y)=DtR(x,y)-D~tR(x,y);]]>⑥根据t时刻的原始左视点深度图像的最大可容忍失真分布图像并根据设定的编码预测结构对t时刻的原始左视点深度图像进行编码，再将编码后的t时刻的左视点深度图像经网络传输给解码端；在解码端对编码后的t时刻的左视点深度图像进行解码，获得解码后的t时刻的左视点深度图像，记为其中，表示解码后的t时刻的左视点深度图像中坐标位置为(x,y)的像素点的深度值；⑦根据设定的编码预测结构对t时刻的原始右视点深度图像与t时刻的原始右视点深度图像的绘制图像{的残差图像进行编码，再将编码后的t时刻的残差图像经网络传输给解码端；在解码端对编码后的t时刻的残差图像进行解码，获得解码后的t时刻的残差图像，记为其中，表示解码后的t时刻的残差图像中坐标位置为(x,y)的像素点的像素值；⑧采用与步骤④相同的操作，将解码后的t时刻的左视点深度图像从左视点投影到右视点，得到解码后的t时刻的右视点深度图像的绘制图像，记为其中，表示解码后的t时刻的右视点深度图像的绘制图像中坐标位置为(x,y)的像素点的深度值；⑨根据解码后的t时刻的右视点深度图像的绘制图像和解码后的t时刻的残差图像得到解码后的t时刻的右视点深度图像的重构图像，记为其中，表示解码后的t时刻的右视点深度图像的重构图像中坐标位置为(x,y)的像素点的深度值。