[发明专利]低码率视频超分辨率重构的编码装置和解码装置

摘要

一种视频处理领域的低码率视频超分辨率重构的编码装置和解码装置，本发明中，编码装置部分提供辅助码流来提高低码率视频超分辨率重构效率和精度，解码装置部分利用编码端提供的极少量的辅助码流，来指导解码端的超分辨率重构，编码装置部分利用带超分辨率重构的预解码闭环反馈构造出极少量的超分辨率重构辅助码流，并且利用编码模块中的人眼感兴趣区域分析模块，着重对人眼敏感区域的超分辨率重构进行引导和矫正，进一步提高视频解码输出的主观质量。本发明与一般视频超分辨率“盲”重构相比明显减少了超分辨率重构复杂度，提高了重构效率，同时增强了超分辨率重构对高度动态和多样化的视频图像数据的适应能力，提高了重构精度。

主权项

1、一种低码率视频超分辨率重构的编码装置，其特征在于，包括：降采样模块、标准视频编码器、第一标准视频解码器、图像特征分析模块、超分辨率重构辅助码流生成模块、第一超分辨率重构模块、码流合成模块，其中：降采样模块、图像特征分析模块、超分辨率重构辅助码流生成模块均接收一部分输入编码装置的原始高分辨率图像序列；降采样模块将原始高分辨率图像序列进行时间和空间的降采样，得到低分辨率图像序列；标准视频编码器将低分辨率图像序列进行编码得到标准视频码流，并传输到第一标准视频解码器；第一标准视频解码器将标准视频码流解码得到低分辨率图像序列，并传输给第一超分辨率重构模块；第一超分辨率重构模块将低分辨率图像序列以及由超分辨率重构辅助码流生成模块输入的超分辨率重构辅助码流，进行超分辨率重构得到超分辨率重构后的图像序列；图像特征分析模块将原始高质量图像序列和超分辨率重构后的图像序列进行比较，得到重构效果分析数据，并传输给超分辨率重构辅助码流生成模块；超分辨率重构辅助码流生成模块利用原始高分辨率图像序列数据，并结合来自于图像特征分析模块的重构效果分析数据，生成超分辨率重构辅助码流，并传输给第一超分辨率重构模块，当超分辨率重构效果满足设定指标时，将超分辨率重构辅助码流传输给码流合成模块；码流合成模块将超分辨率重构辅助码流和标准视频码流混合生成混合视频码流输出。