[发明专利]图像处理方法及装置、电子设备和存储介质

权利要求书

1.一种图像处理方法，其特征在于，包括：

获取基于待处理的图像或其中间处理结果的卷积处理结果；

获取表示将所述图像划分为多个不同区域的图像分割结果，所述图像分割结果包括所述图像的不同区域的特征；

根据所述图像分割结果对所述卷积处理结果进行调制。

2.根据权利要求1所述的方法，其特征在于，根据所述图像分割结果对所述卷积处理结果进行调制，包括：

基于所述图像分割结果确定调制参数；

根据所述调制参数对所述卷积处理结果进行调制。

3.根据权利要求2所述的方法，其特征在于，根据所述图像分割结果确定调制参数，包括：

对所述图像分割结果进行卷积处理；

基于卷积处理后的所述图像分割结果确定所述调制参数。

4.根据权利要求2或3所述的方法，其特征在于，所述多个不同区域中至少二个不同区域对应的调制参数不同。

5.根据权利要求1-3任一所述的方法，其特征在于，所述调制包括：仿射变换处理或指数变换处理。

6.根据权利要求1-3任一所述的方法，其特征在于，根据所述图像分割结果对所述卷积处理结果进行调制，包括：

将所述图像分割结果进行第一卷积处理得到尺度参数；

将所述图像分割结果进行第二卷积处理得到偏置参数；

利用所述尺度参数和所述偏置参数对所述卷积处理结果进行仿射变换处理，其中所述尺度参数用于调制所述卷积处理结果的尺度，所述偏置参数用于调制所述卷积处理结果的偏置。

7.根据权利要求6所述的方法，其特征在于，利用所述尺度参数和所述偏置参数对所述卷积处理结果进行仿射变换处理，包括：

将所述卷积处理结果与所述尺度参数相乘后与所述偏置参数相加，或

将所述卷积处理结果与所述偏置参数相加后与所述尺度参数相乘。

8.根据权利要求1-3任一所述的方法，其特征在于，根据所述图像分割结果对所述卷积处理结果进行调制，包括：

将所述图像分割结果进行第三卷积处理得到形状参数；

将所述图像分割结果进行第四卷积处理得到位置参数；

利用所述形状参数和所述位置参数对所述卷积处理结果进行指数变换处理，其中所述形状参数用于调制所述卷积处理结果的形状，所述位置参数用于调制所述卷积处理结果的位置。

9.根据权利要求1-3任一所述的方法，其特征在于，获取表示将所述图像划分为多个不同区域的图像分割结果，包括：

根据多个不同的图像分割类别对所述图像的空间特征进行概率计算，得到所述图像分割结果。

10.根据权利要求9所述的方法，其特征在于，所述图像分割类别根据以下一种或任意组合来确定：图像语义、图像深度或图像纹理颗粒度。

11.根据权利要求1-3任一所述的方法，其特征在于，所述方法应用于神经网络，所述神经网络包括至少一卷积层和至少一空间特征调制层；

所述卷积层对输入的所述图像或其中间处理结果进行卷积处理，得到所述卷积处理结果；

所述空间特征调制层根据所述图像分割结果对输入的卷积处理结果进行调制。

12.根据权利要求11所述的方法，其特征在于，所述神经网络包括多个所述空间特征调制层，所述方法还包括：

将所述图像分割结果输入到所述神经网络中的各个空间特征调制层。

13.根据权利要求1-3任一所述的方法，其特征在于，所述方法还包括：

将调制后的所述卷积处理结果进行上采样处理，得到所述图像的超分辨率图像。