[发明专利]图像分割方法、装置、电子设备及存储介质

权利要求书

1.一种图像分割方法，包括：

获取输入图像，并提取所述输入图像的视觉特征；

根据所述输入图像的视觉特征生成视觉图；

获取语义图；

根据所述语义图对所述视觉图进行增强以生成增强视觉图；

对所述增强视觉图进行反投影以生成局部增强像素级特征；以及

根据所述局部增强像素级特征进行图像分割。

2.如权利要求1所述的图像分割方法，其中，所述根据所述输入图像的视觉特征生成视觉图，包括：

获取投影矩阵和转换矩阵；

根据所述投影矩阵、所述转换矩阵和所述输入图像的视觉特征生成所述视觉图。

3.如权利要求1所述的图像分割方法，其中，所述获取语义图包括：

根据预设词向量生成每个类别的语义表征；

根据预设的多层感知矩阵和所述每个类别的语义表征生成语义图。

4.如权利要求1所述的图像分割方法，其中，所述根据所述语义图对所述视觉图进行增强以生成增强视觉图，包括：

对所述语义图进行自推理以生成语义自推理图；

对所述视觉图进行自推理以生成视觉自推理图；

根据所述语义自推理图和所述视觉自推理图生成第一引导矩阵，其中，所述第一引导矩阵为所述语义图至所述视觉图的引导矩阵；

根据所述视觉自推理图和所述第一引导矩阵生成所述增强视觉图。

5.如权利要求4所述的图像分割方法，其中，还包括：

根据所述语义自推理图和所述视觉自推理图生成第二引导矩阵，其中，所述第二引导矩阵为所述视觉图至所述语义图的引导矩阵；

根据所述语义自推理图和所述第二引导矩阵生成增强语义图，其中，所述增强语义图用于进行语义上下文约束。

6.如权利要求1所述的图像分割方法，其中，所述对所述增强视觉图进行反投影以生成局部增强像素级特征，包括：

获取转置矩阵和权重矩阵；

根据所述转置矩阵、所述权重矩阵和所述增强视觉图以及所述输入图像的视觉特征生成所述局部增强像素级特征。

7.如权利要求1所述的图像分割方法，其中，所述根据所述局部增强像素级特征进行图像分割，包括：

对所述局部增强像素级特征进行卷积以生成局部增强像素级卷积特征；

对所述局部增强像素级卷积特征进行上采样以生成图像分割结果。

8.一种图像分割装置，包括：

第一获取模块，用于获取输入图像，并提取所述输入图像的视觉特征；

第一生成模块，用于根据所述输入图像的视觉特征生成视觉图；

第二获取模块，用于获取语义图；

第二生成模块，用于根据所述语义图对所述视觉图进行增强以生成增强视觉图；

反投影模块，用于对所述增强视觉图进行反投影以生成局部增强像素级特征；

分割模块，用于根据所述局部增强像素级特征进行图像分割。

9.如权利要求8所述的图像分割装置，其中，所述第一生成模块具体用于，

获取投影矩阵和转换矩阵；

根据所述投影矩阵、所述转换矩阵和所述输入图像的视觉特征生成所述视觉图。

10.如权利要求8所述的图像分割装置，其中，所述第二获取模块具体用于，

根据预设词向量生成每个类别的语义表征；

根据预设的多层感知矩阵和所述每个类别的语义表征生成语义图。

11.如权利要求8所述的图像分割装置，其中，所述第二生成模块具体用于，

对所述语义图进行自推理以生成语义自推理图；

对所述视觉图进行自推理以生成视觉自推理图；

根据所述语义自推理图和所述视觉自推理图生成第一引导矩阵，其中，所述第一引导矩阵为所述语义图至所述视觉图的引导矩阵；

根据所述视觉自推理图和所述第一引导矩阵生成所述增强视觉图。