[发明专利]图像数据传输方法、系统、装置、电子设备及存储介质

说明书

本申请实施例提供的图像数据传输方法、系统、装置、电子设备及存储介质，涉及信息处理技术领域，通过在服务端对待处理图像进行降采样，并在对待处理图像输入预先训练的超分辨率模型进行超分辨率恢复，根据超分辨率恢复后的图像和待处理图像计算残差信息，将降采样后的图像和残差信息发送给客户端，可以节省带宽，在客户端将所述降采样后的图像输入与服务端相同的预先训练的超分辨率模型对所述降采样后的图像进行超分辨率恢复，得到超分辨率恢复后的图像，根据所述残差信息对所述超分辨率恢复后的图像进行补偿，得到最终图像，通过残差信息来进行图像补偿，得到最终图像，可以在尽可能减少图像失真的情况下节省带宽。

技术领域

本申请涉及信息处理技术领域，特别是涉及图像数据传输方法、系统、装置、电子设备及存储介质。

背景技术

随着技术发展，图像应用越来越广泛，目前图像数据信息量十分巨大，图像数据信息传送过程中占用大量传输带宽，为了节省带宽占用，在图像传输过程中需要对图像进行压缩处理。传统的图像传输技术，先在服务端进行图像压缩，然后将压缩后的图像传输到客户端，由客户端进行解压和显示。

传统的图像传输技术，如果图像压缩太少，会导致图像信息量过大，占用过多传输带宽，无法有效通过图像压缩起到节省带宽的效果，而如果图像压缩太多，则会导致图像过度失真，严重影响客户端的用户体验。

发明内容

本申请实施例的目的在于提供图像数据传输方法、系统、装置、电子设备、存储介质及包含指令的计算机程序产品，以实现在尽可能减少图像失真的情况下节省带宽。具体技术方案如下：

第一方面，本申请实施例提供了一种图像数据传输方法，应用于服务端，包括：

对待处理图像进行降采样，得到降采样后的图像；

将所述降采样后的图像输入预先训练的超分辨率模型进行超分辨率恢复，得到超分辨率恢复后的图像；

计算所述超分辨率恢复后的图像与所述待处理图像的差值，得到残差信息；

发送所述降采样后的图像和所述残差信息，以使客户端按照所述降采样后的图像和所述残差信息恢复所述待处理图像。

可选的，所述待处理图像的分辨率与所述超分辨率恢复后的图像的分辨率相同。

可选的，所述预先训练的超分辨率模型的训练步骤，包括：

获取样本图像和超分辨率模型；

对所述样本图像进行降采样，得到降采样后的样本图像；

将所述样本图像和所述降采样后的样本图像输入所述超分辨率模型中进行训练，得到预先训练的超分辨率模型。

可选的，所述超分辨率模型，包括：金字塔卷积网络，残差块网络，上采样层网络，连接层，第一卷积层，第二卷积层，第一上采样层，运算层。

可选的，所述金字塔卷积网络采用多层金字塔结构，包括多个卷积层，所述残差块网络包括多个残差块，所述上采样层网络包括多个上采样层，所述残差块网络包括的残差块个数与金字塔卷积网络的卷积层的个数相同，不同的残差块对应所述金字塔卷积网络的不同卷积层，所述上采样层网络包括的上采样层个数与金字塔卷积网络的卷积层的个数相同。

可选的，所述将所述降采样后的图像输入预先训练的超分辨率模型进行超分辨率恢复，得到超分辨率恢复后的图像，包括：

将所述降采样后的图像输入所述金字塔卷积网络，通过所述金字塔卷积网络的多个卷积层分别进行卷积操作，分别得到多个金字塔卷积网络图像；

将各所述金字塔卷积网络图像输入所述残差块网络，通过所述金字塔卷积网络的各卷积层各自对应的所述残差块对相应的金字塔卷积网络图像进行特征提取，得到多个残差块图像；