[发明专利]高清视频处理方法、主设备、从设备和芯片系统

说明书

本发明实施例提供了一种高清视频处理方法、主设备、从设备和芯片系统。本发明实施例提供的技术方案中，主设备根据第一高清视频流生成编码后的高清关键帧和低清视频流，并向从设备发送由低清视频流和编码后的高清关键帧进行数据融合生成的视频数据流；从设备将视频数据流进行解析生成低清视频流和编码后的高清关键帧，对编码后的高清关键帧解码生成高清关键帧，并根据低清视频流和高清关键帧生成第二高清视频流。本发明实施例应用于终端人工智能领域以及计算机视觉领域，基于高清关键帧的超分辨率技术，主设备和从设备通过设备协同完成高清视频的处理，能够实现高清视频的更低码率传输和低清视频的更高超分质量，改善用户的数字电视服务体验。

【技术领域】

本发明涉及人工智能领域，尤其涉及一种高清视频处理方法、主设备、从设备和芯片系统。

【背景技术】

近年来，基于IPTV(Internet Protocol Television)技术的数字电视服务的应用规模处于飞速发展阶段，数字电视领域不断迈入高分辨率、高帧率、高动态范围、高色深和宽色域的全高清时代。

但是由于网络传输系统自身传输能力的限制，以及巨大的数据传输需求，当前承载数字电视服务的视频传输网络在全高清时代还存在一定的局限性。具体而言，视频传输网络的局限性主要体现在以下方面：因视频传输网络传输的带宽较小且容量受限，数字电视服务不能在全网的全时段提供高质量的视频；在密集服务时，因视频传输网络的传输带宽产生波动以及视频传输网络的服务规模突然增大，网络传输系统会基于自适应码率机制传输低清视频，进而导致用户在观看视频过程中出现卡顿和马赛克的现象，使得用户的数字电视服务体验较差。

【发明内容】

有鉴于此，本发明实施例提供了一种高清视频处理方法、主设备、从设备和芯片系统，能够实现高清视频的更低码率传输和低清视频的更高超分质量，改善用户的数字电视服务体验。。

第一方面，本发明实施例提供了一种高清视频处理方法，应用于主设备，所述方法包括：

根据第一高清视频流生成编码后的高清关键帧；

根据第一高清视频流生成低清视频流；

对所述低清视频流和所述编码后的高清关键帧进行数据融合，生成视频数据流；

将所述视频数据流发送至从设备。

在一种可能的实现方式中，所述根据第一高清视频流生成编码后的高清关键帧，包括：

从所述第一高清视频流中提取出高清关键帧；

根据视频编码标准对所述高清关键帧进行编码，生成所述编码后的高清关键帧。

在一种可能的实现方式中，所述根据第一高清视频流生成低清视频流，包括：

通过图像插值算法对所述第一高清视频流按照压缩比降采样，生成低清帧；

根据视频编码标准对所述低清帧进行编码生成所述低清视频流。

在一种可能的实现方式中，所述从所述第一高清视频流中提取出高清关键帧，包括：

将所述第一高清视频流的第一个高清帧作为当前的高清关键帧，并将所述第一个高清帧的下一个高清帧作为当前高清帧；

将所述当前的高清关键帧和所述当前高清帧输入深度网络模型，得到所述当前的高清关键帧和所述当前高清帧之间的语义特征差异和纹理特征差异；

将所述语义特征差异和纹理特征差异相加得到特征差异；

判断所述特征差异是否大于预设阈值；

若判断出所述特征差异大于所述预设阈值，将所述当前高清帧确定为当前的高清关键帧，将下一个高清帧作为当前高清帧，并继续执行所述将所述当前的高清关键帧和所述当前高清帧输入深度网络模型的步骤；