[发明专利]一种图像后期和谐化处理方法、系统及终端

权利要求书

1.一种图像后期和谐后处理方法，其特征在于，包括：

S11：利用前景掩膜分割图指示待处理区域，得到前景掩膜区域图，在每一归一化层，将所述前景掩膜区域图缩放到与该归一化层的特征大小相同；

S12：区域自适应实例归一化层根据缩放后的前景掩膜区域图，从同一输入图像特征图的背景区域提取出统计特征，并将所述统计特征通过反调制应用到前景区域的特征上，使得同一图像的前景与背景在特征部分具有相似的统计特征；

S13：将所述S12得到的区域自适应实例归一化层应用到图像和谐化映射网络中，将输入图像的前景图像输入到所述图像和谐化映射网络中，输出已将前景图像调整后的图像；

所述S12进一步包括：

S121：在缩放后的前景掩膜区域图的指示下，对同一输入图像特征图的前景区域以及背景区域分别进行特征归一化；

S122：从归一化后的背景区域按照通道的方式提取出统计特征，包括：沿通道的平均值统计特征以及标准差统计特征；

S123：将所述S122得到的标准差统计特征乘以归一化后的前景区域的特征，再加上所述S122得到的平均值统计特征；

所述S121中，归一化方式为：

其中，

其中，Fⁱ为第i个归一化层的输入特征，Mⁱ为第i层经过缩放后的前景掩码区域图，而下标h,w,c表示在该位置的特征值，∈表示一个小量，设为10^-7，#{Mⁱ＝1}表示第i层前景掩码中像素值非零的像素个数，°为哈达玛乘积；

所述S122中，平均值统计特征以及标准差统计特征的公式为：

其中，Fⁱ为第i个归一化层的输入特征，为第i层经过缩放后的背景掩码区域图，并通过公式计算得到，而下标h,w,c表示在该位置的特征值，∈表示一个小量，设为10^-7，表示该层背景掩码中像素值非零的像素个数，°为哈达玛乘积；

所述S123，反调制公式为：

所述图像和谐化映射网络包括：编码器、解码器，所述S13进一步包括：

S131：利用编码器网络来编码、抽取输入图像的深层次特征，在编码器中利用所述区域自适应实例归一化层从编码器特征的背景特征中提取出统计特征，并应用到前景特征；

S132：利用解码器网络来解码、映射编码器和解码器的深层次特征，在所述解码器中利用所述区域自适应实例归一化层从解码器特征的背景特征中提取出统计特征，并应用到前景特征上；

S133：通过跨越连接将所述S131得到的结果与所述S132得到的结果进行级联，以减少跨步卷积带来的信息损失并保持图像的高分辨率特征；

S134：将经过所述S133处理后的特征解码成图像；

所述S133之后还包括：

S51：从所述S133得到的特征中学习出一个通道注意力权重，再利用所述通道注意力权重乘以所述S133得到的特征；

进一步地，所述S134为：将经过所述S51处理后的特征解码成图像。