[发明专利]一种基于内容自适应的光场视频编码方法

权利要求书

1.一种基于内容自适应的光场视频编码方法，其特征在于，包括以下步骤：

S1、获取光场图像，选取所述光场图像中的子图像的中心视点子图像，除中心视点子图像以外的子图像为相邻子图像；

S2、采用多视图编码方法对所述中心视点子图像进行编码获得中心视点光场视频；

S3、将所述中心视点光场视频与所述相邻子图像的光场视频相减得到残差视频；

S4、计算残差视频在帧之间的相关性值R1，并与帧之间的相关性阈值进行比较；

S5、若相关性值R1的绝对值小于相关性阈值，将残差视频重排序为空域残差视频，将其编码为空域残差视频码流后输出；

若相关性值R1的绝对值大于相关性阈值，则执行步骤S6；

S6、计算残差视频中的残差子图像在帧之间的残差能量值E1，以及残差视频在残差子图像之间的残差能量值E2；

S7、当帧之间的残差能量值E1小于残差子图像之间的残差能量值E2时，将残差视频重排序为时域残差视频，将其编码为时域残差视频码流后输出；

否则，将残差视频重排序为空域残差视频，将其编码为空域残差视频码流后输出。

2.如权利要求1所述的基于内容自适应的光场视频编码方法，其特征在于：所述光场视频包括N 个帧，即N个光场图像，每帧有140个残差子图像。

3.如权利要求2所述的基于内容自适应的光场视频编码方法，其特征在于：计算残差视频在帧之间的相关性值R1的步骤包括：

S41、对所述残差视频在时域上的所有帧，从每帧中140个残差子图像中随机选取3个残差子图像，形成3个残差子视频；

S42、对选取的每个残差子图像，分别计算相应残差子视频中每个帧与其实际编码过程用到的参考帧之间的相关性值；其中，每个帧的参考帧的数量为n1，对单个帧计算得到n1个相关性值，并取其平均值作为单个帧的相关性值；N个帧共获得N个相关性值；对获得的N个相关性值求取其平均值得到残差子图像的相关性值；

S43、将3个残差子图像获得的3个相关性值取平均值获得残差视频在帧之间的相关性值R1。

4.如权利要求3所述的基于内容自适应的光场视频编码方法，其特征在于：所述步骤S42中残差子图像在帧之间的相关性值的算法基于MATLAB的内建函数corr2。

5.如权利要求1所述的基于内容自适应的光场视频编码方法，其特征在于：残差能量值的计算公式为，其中，A、B为两个矩阵，E代表A、B之间的残差能量。

6.如权利要求2所述的基于内容自适应的光场视频编码方法，其特征在于：步骤S6中计算残差能量值E1的步骤包括：

S611、对时域上的所有帧，从每帧中140个残差子图像中随机选取3个残差子图像；

S612、对选取的每个残差子图像，计算每个帧与其实际编码过程用到的参考帧之间的能量；其中，每个帧的参考帧数量为n1，对单个帧计算得到n1个能量值，并取n1个能量值的平均值作为单个帧的能量值；N个帧共获得N个能量值；对获得的N个能量值求取平均值得到残差子图像的能量值；

S613、将3个残差子图像获得的3个能量值取平均值获得残差视频在帧之间的能量值E1。

7.如权利要求2所述的基于内容自适应的光场视频编码方法，其特征在于：步骤S6中计算残差能量值E2的步骤包括：

S621、从N张光场图像随机选取3张光场图像以及光场图像上的所有残差子图像M个；

S622、计算每个残差子图像与其实际编码过程用到的参考残差子图像之间的能量；其中，每个残差子图像的参考残差子图像数量为n1，对单个残差子图像计算得到n1个能量值，并取其平均值作为单个残差子图像的能量值；M个残差子图像共获得M个能量值；

S623、将获得的M个能量值求取其平均值得到残差子图像之间的能量值E2。

8.如权利要求1所述的基于内容自适应的光场视频编码方法，其特征在于：

所述空域残差视频采用空域多视图编码方法进行编码；所述时域残差视频采用时域多视图编码方法进行编码。