[发明专利]高清视频处理方法、主设备、从设备和芯片系统

权利要求书

1.一种高清视频处理方法，其特征在于，应用于主设备，所述方法包括：

根据第一高清视频流生成编码后的高清关键帧；

根据第一高清视频流生成低清视频流；所述低清视频流包括与所述高清关键帧对应的多个低清帧；

对所述低清视频流和所述编码后的高清关键帧进行数据融合，生成视频数据流；

将所述视频数据流发送至从设备，以使所述从设备依次将所述多个低清帧中每个低清帧基于所述高清关键帧进行计算，生成所述多个低清帧对应的超分帧，并根据所述高清关键帧、所述多个低清帧和所述多个低清帧对应的超分帧进行图像重构，生成第二高清视频流；

所述从设备依次将所述多个低清帧中每个低清帧基于所述高清关键帧进行计算，生成所述多个低清帧对应的超分帧，包括：

所述从设备通过视频超分辨率算法对第一个低清帧进行计算，生成当前的超分帧，将所述第一个低清帧的下一个低清帧作为当前低清帧；通过深度卷积神经网络算法对所述高清关键帧和所述当前的超分帧进行计算，从所述高清关键帧和所述当前的超分帧中提取出高清特征；通过自适应实例归一化技术对所述高清特征和所述当前低清帧进行计算生成超分特征；对所述超分特征进行上采样生成下一个的超分帧；判断所述当前低清帧是否包括所述多个低清帧的最后一个低清帧；若判断出所述当前低清帧不包括所述多个低清帧的最后一个低清帧，将下一个低清帧作为当前低清帧，将所述下一个的超分帧作为当前的超分帧，继续执行所述通过深度卷积神经网络算法对所述高清关键帧和所述当前的超分帧进行计算，从所述高清关键帧和所述当前的超分帧中提取出高清特征的步骤；若判断出所述当前低清帧包括所述多个低清帧的最后一个低清帧，继续执行所述根据所述高清关键帧、所述多个低清帧和所述多个低清帧对应的超分帧进行图像重构，生成第二高清视频流的步骤。

2.根据权利要求1所述的方法，其特征在于，所述根据第一高清视频流生成编码后的高清关键帧，包括：

从所述第一高清视频流中提取出高清关键帧；

根据视频编码标准对所述高清关键帧进行编码，生成所述编码后的高清关键帧。

3.根据权利要求1所述的方法，其特征在于，所述根据第一高清视频流生成低清视频流，包括：

通过图像插值算法对所述第一高清视频流按照压缩比降采样，生成低清帧；

根据视频编码标准对所述低清帧进行编码生成所述低清视频流。

4.根据权利要求2所述的方法，其特征在于，所述从所述第一高清视频流中提取出高清关键帧，包括：

将所述第一高清视频流的第一个高清帧作为当前的高清关键帧，并将所述第一个高清帧的下一个高清帧作为当前高清帧；

将所述当前的高清关键帧和所述当前高清帧输入深度网络模型，得到所述当前的高清关键帧和所述当前高清帧之间的语义特征差异和纹理特征差异；

将所述语义特征差异和纹理特征差异相加得到特征差异；

判断所述特征差异是否大于预设阈值；

若判断出所述特征差异大于所述预设阈值，将所述当前高清帧确定为当前的高清关键帧，将下一个高清帧作为当前高清帧，并继续执行所述将所述当前的高清关键帧和所述当前高清帧输入深度网络模型的步骤；

若判断出所述特征差异小于或者等于所述预设阈值，判断所述当前的高清关键帧和所述当前高清帧之间的帧间间隔是否大于最大帧间间隔；

若判断出所述当前的高清关键帧和所述当前高清帧之间的帧间间隔小于或者等于所述最大帧间间隔，将下一个高清帧作为当前高清帧，并继续执行所述将所述当前的高清关键帧和所述当前高清帧输入深度网络模型的步骤；

若判断出所述当前的高清关键帧和所述当前高清帧之间的帧间间隔大于所述最大帧间间隔，将所述当前高清帧确定为当前的高清关键帧，将下一个高清帧作为当前高清帧，并继续执行所述将所述当前的高清关键帧和所述当前高清帧输入深度网络模型的步骤。