[发明专利]视频超分辨率处理方法及装置

权利要求书

1.一种视频超分辨率处理方法，其特征在于，包括：

获取视频流中任一编码块的编码信息，其中一个编码块属于所述视频流中的一个图像帧，所述视频流中的一个图像帧包括多个编码块，所述编码信息包括参考图像帧索引、匹配编码块索引以及帧间预测标记，所述匹配编码块索引所标识的匹配编码块为所述参考图像帧索引所标识的参考图像帧中与所述任一编码块的像素差异最小的编码块；

根据所述帧间预测标记确定所述任一编码块的帧间预测模式，并根据所述帧间预测模式和所述匹配编码块的像素信息，确定所述任一编码块的超分辨率像素块，所述超分辨率像素块为所述任一编码块的像素信息经过超分辨率处理后得到的像素块或者所述超分辨率像素块为所述匹配编码块的超分辨率匹配像素块；

将所述视频流中属于同一图像帧的各个编码块的超分辨率像素块进行拼接得到超分辨率图像，所述超分辨率图像用于生成超分辨率视频。

2.根据权利要求1所述的方法，其特征在于，所述任一编码块的像素信息与所述匹配编码块的像素信息相同；

所述根据所述帧间预测模式和所述匹配编码块的像素信息，确定所述任一编码块的超分辨率像素块，包括：

当所述帧间预测模式为跳过模式（skip模式）时，将所述匹配编码块的超分辨率匹配像素块确定为所述任一编码块的超分辨率像素块，所述超分辨率匹配像素块包括所述匹配编码块的像素信息经过超分辨率处理后得到的像素块。

3.根据权利要求1所述的方法，其特征在于，所述根据所述帧间预测模式和所述匹配编码块的像素信息，确定所述任一编码块的超分辨率像素块，包括：

当所述帧间预测模式为高级运动矢量预测模式（AMVP模式）或合并模式（merge模式）时，确定所述任一编码块的像素预测残差，并根据所述匹配编码块的像素信息和所述像素预测残差确定所述任一编码块的像素信息；

对所述任一编码块的像素信息进行超分辨率处理，以得到所述任一编码块的超分辨率像素块。

4.根据权利要求3所述的方法，其特征在于，所述对所述任一编码块的像素信息进行超分辨率处理，以得到所述任一编码块的超分辨率像素块，包括：

获取所述任一编码块中的第一像素区域，所述第一像素区域的像素信息为所述任一编码块的像素信息中除第二像素区域的像素信息外的像素信息，所述第二像素区域为所述任一编码块中预设尺寸的像素区域；

对所述第一像素区域进行像素填充，并将所述像素填充后的第一像素区域的像素信息进行超分辨率处理后得到所述任一编码块对应的第一像素块；

对所述任一编码块的像素信息进行超分辨率处理，并将所述任一编码块的像素信息经过超分辨率处理后得到的像素块与所述第一像素块进行拼接，得到所述任一编码块的超分辨率像素块。

5.根据权利要求4所述的方法，其特征在于，所述获取所述任一编码块中的第一像素区域，包括：

从所述任一编码块中确定出大小为所述预设尺寸的第二像素区域，并将所述任一编码块中与所述第二像素区域不重叠的区域确定为第一像素区域。

6.根据权利要求1-5任一项所述的方法，其特征在于，所述编码信息中还包括运动矢量预测值MVP和/或运动矢量差MVD；

所述将所述视频流中属于同一图像帧的各个编码块的超分辨率像素块进行拼接得到超分辨率图像，包括：

根据所述帧间预测模式、所述MVP和/或所述MVD确定出所述任一编码块的运动矢量MV；

根据所述MV和所述匹配编码块在所述参考图像帧上的位置确定出所述任一编码块在所述任一编码块所属图像帧上的位置；

按照所述视频流中属于同一图像帧的各个编码块在所述各个编码块所属图像帧上的位置，将所述各个编码块的超分辨率像素块进行拼接后得到所述各个编码块所属图像帧的超分辨率图像。

7.根据权利要求1-5任一项所述的方法，其特征在于，所述任一编码块所属图像帧的帧类型为P帧。