[发明专利]语义分割方法、装置、电子设备与存储介质

权利要求书

1.一种语义分割方法，其特征在于，包括：

几何变换的步骤，包括对源领域图像进行几何变换，得到第一中间图像；对目标领域图像进行几何变换，得到第二中间图像；其中，所述源领域图像为带有标签数据的计算机合成图像，所述目标领域图像为待进行语义分割的图像；

图像特征提取的步骤，包括将所述源领域图像、目标领域图像、第一中间图像以及第二中间图像分别输入语义分割模型中的生成器网络，依次得到第一图像特征、第二图像特征、第三图像特征以及第四图像特征；其中，所述生成器网络包括交叉领域类别感知模块，所述交叉领域类别感知模块用于对源领域和目标领域中分类模糊的像素点特征进行调整，使得不同领域同种类特征的类别中心一致；

几何逆变换的步骤，包括对所述第三图像特征进行几何逆变换，得到第五图像特征；对所述第四图像特征进行几何逆变换，得到第六图像特征；

判别的步骤，包括将所述第一图像特征与第六图像特征输入语义分割模型的判别器网络中的第一判别器，将第二图像特征与第五图像特征输入语义分割模型的判别器网络中的第二判别器，根据所述第一判别器与第二判别器的判别结果确定是否需要对所述语义分割模型中的参数进行调整；

语义分割的步骤，包括当所述语义分割模型中的参数不需要调整时，根据所述语义分割模型中的生成器网络对所述目标领域图像进行语义分割；

其中，在所述判别的步骤与所述语义分割的步骤之间，还包括：

参数调整的步骤，包括当所述语义分割模型中的参数需要调整时，调整所述语义分割模型中的参数，然后重新执行图像特征提取的步骤。

2.根据权利要求1所述的语义分割方法，其特征在于，在所述几何逆变换的步骤与所述判别的步骤之间，方法还包括：

特征对齐的步骤，包括将所述的第一图像特征与第五图像特征进行特征对齐，将所述的第二图像特征与第六图像特征进行特征对齐。

3.根据权利要求1或2所述的语义分割方法，其特征在于，所述几何变换为以下操作中的任意一种：上下翻转、左右翻转或伸缩；

相应的，所述几何逆变换为所述几何变换的逆向操作。

4.一种语义分割装置，其特征在于，包括：

几何变换模块，用于对源领域图像进行几何变换，得到第一中间图像；对目标领域图像进行几何变换，得到第二中间图像；其中，所述源领域图像为带有标签数据的计算机合成图像，所述目标领域图像为待进行语义分割的图像；

图像特征提取模块，用于将所述源领域图像、目标领域图像、第一中间图像以及第二中间图像分别输入语义分割模型中的生成器网络，依次得到第一图像特征、第二图像特征、第三图像特征以及第四图像特征；其中，所述生成器网络包括交叉领域类别感知模块，所述交叉领域类别感知模块用于对源领域和目标领域中分类模糊的像素点特征进行调整，使得不同领域同种类特征的类别中心一致；

几何逆变换模块，用于对所述第三图像特征进行几何逆变换，得到第五图像特征；对所述第四图像特征进行几何逆变换，得到第六图像特征；

判别模块，用于将所述第一图像特征与第六图像特征输入语义分割模型的判别器网络中的第一判别器，将第二图像特征与第五图像特征输入语义分割模型的判别器网络中的第二判别器，根据所述第一判别器与第二判别器的判别结果确定是否需要对所述语义分割模型中的参数进行调整；

语义分割模块，用于当所述语义分割模型中的参数不需要调整时，根据所述语义分割模型中的生成器网络对所述目标领域图像进行语义分割；

其中，在所述判别模块与所述语义分割模块之间，还包括：

参数调整模块，用于当所述语义分割模型中的参数需要调整时，调整所述语义分割模型中的参数，然后重新调用图像特征提取模块。

5.根据权利要求4所述的语义分割装置，其特征在于，还包括：

特征对齐模块，用于将所述的第一图像特征与第五图像特征进行特征对齐，将所述的第二图像特征与第六图像特征进行特征对齐。

6.一种电子设备，包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序，其特征在于，所述处理器执行所述程序时实现如权利要求1至3任一项所述语义分割方法的步骤。

7.一种非暂态计算机可读存储介质，其上存储有计算机程序，其特征在于，该计算机程序被处理器执行时实现如权利要求1至3任一项所述语义分割方法的步骤。