[发明专利]一种联合空频域的感知HEVC多描述视频编码

权利要求书

1.一种基于联合空频域的感知多描述视频编码方法，其特征在于，包括：

(1)编码端的步骤如下：

步骤1、对于输入视频序列在编码过程中将其帧内、帧间预测的预测误差像素块，通过多相子空间下采样的方法分为两组行列交错的残差像素；

步骤2、根据HEVC变换块分割方式，采用DCT/DST变换方式，将两组残差像素块变换生成两组系数，每组系数个数仅为原始DCT/DST系数的一半；

步骤3、将两组系数分别与滤波控制数据、帧内预测数据、运动矢量等信息相结合，作为待生成描述的主体信息；

步骤4、结合人类视觉模型，将输入的原始视频经过视觉显著性模型处理，根据显著性像素的占比将CTU分为5类，对应5种人眼视觉感知显著权重；

步骤5、根据步骤4中获取的显著权重，分别对每个CTU进行冗余率失真优化；

步骤6、建立网络信道丢包率与冗余率模型，根据信道的带宽和分组丢失率自动地调整多描述编码的冗余率，将冗余率失真优化后的两组编码信息经熵编码，生成两个码流，作为两个描述，分别在独立的信道进行传输；

(2)解码端的步骤如下：

根据解码端接收到的描述数量进行视频重建：

情况1：如果在解码端只接收到一个描述；

步骤1、对该描述通过HEVC解码器还原出一半的残差像素。

步骤2、利用多相子空间下采样生成像素之间的空间相关性，对还原出一半的残差像素使用基于梯度的空域插值，还原出全分辨率的残差像素块，进行空域的差错隐藏；

步骤3、将获取的全分辨率残差块与参考帧经过帧内、帧间预测产生的像素块相加，得到边缘重建的视频图像；

情况2：如果在解码端接收到了两个描述；

步骤1、对这两个描述同时HEVC解码，得到两个边缘重建视频；

步骤2、通过对两个边缘重建视频进行像素交织，得到中心重建视频。