[发明专利]图像处理方法、装置、存储介质及设备

权利要求书

1.一种图像处理方法，其特征在于，所述方法包括：

获取待预测图像，对所述待预测图像进行特征提取；

生成所述待预测图像的至少一个候选区域，将所述至少一个候选区域映射到所述待预测图像的特征图上，一个所述候选区域包含一个实例；

基于目标网络对映射后的所述特征图进行处理，得到所述待预测图像中被遮挡实例的实例分割结果；其中，所述实例分割结果包括所述被遮挡实例的透视掩码和非透视掩码；所述透视掩码用于指示所述被遮挡实例的整体结构，所述整体结构包括未遮挡的可见部分和被遮挡的不可见部分，所述非透视掩码用于指示所述不可见部分，所述透视掩码及所述非透视掩码表示了所述被遮挡实例在所述待预测图像中与其他实例之间的相对遮挡关系。

2.根据权利要求1所述的方法，其特征在于，所述方法还包括：

对于每个所述候选区域，对所述候选区域进行像素校正处理，得到所述候选区域的特征图；

其中，所述候选区域的特征图包括第一特征图、第二特征图和第三特征图，所述第一特征图和所述第二特征图的尺寸一致，且小于所述第三特征图的尺寸。

3.根据权利要求2所述的方法，其特征在于，所述基于目标网络对映射后的所述特征图进行处理，包括：

对于每个所述候选区域，将所述第一特征图、所述第二特征图和所述第三特征图进行特征融合处理；

将得到的融合特征图输入所述目标网络的第一分支结构进行处理。

4.根据权利要求2所述的方法，其特征在于，所述目标网络还包括第二分支结构，所述方法还包括：

对于每个所述候选区域，将所述第一特征图输入所述第二分支结构进行处理，得到所述候选区域包含实例的遮挡分类信息。

5.根据权利要求2所述的方法，其特征在于，所述目标网络还包括第三分支结构，所述方法还包括：

对于每个所述候选区域，将所述第二特征图输入所述第三分支结构进行处理，得到所述候选区域包含实例的语义标签和位置信息。

6.根据权利要求3所述的方法，其特征在于，所述将所述第一特征图、所述第二特征图和所述第三特征图进行特征融合处理，包括：

将所述第一特征图和所述第二特征图进行级联处理，得到第一中间特征图；

将所述第一中间特征图依次经过一个反卷积层和两个卷积层进行处理，得到第二中间特征图；

将所述第二中间特征图与所述第三特征图进行级联处理，得到第三中间特征图，将所述第三中间特征图依次经过三个卷积层进行处理，得到所述融合特征图。

7.根据权利要求3所述的方法，其特征在于，所述将得到的融合特征图输入所述目标网络的第一分支结构进行处理，包括：

将所述融合特征图输入第一反卷积层进行处理，得到第一处理特征图；

将所述第一处理特征图输入所述第一分支结构包括的第一掩码分支，当所述候选区域包含实例为被遮挡实例时，得到所述候选区域包含实例的非透视掩码。

8.根据权利要求7所述的方法，其特征在于，所述将得到的融合特征图输入所述目标网络的第一分支结构进行处理，还包括：

将所述融合特征图输入第二反卷积层进行处理，得到第二处理特征图；

将所述第二处理特征图输入所述第一分支结构包括的第二掩码分支，得到所述候选区域包含实例的透视掩码。

9.根据权利要求4所述的方法，其特征在于，所述将所述第一特征图输入所述第二分支结构进行处理，得到所述候选区域包含实例的遮挡分类信息，包括：

基于所述第二分支结构，确定所述候选区域包含实例的被遮挡面积是否达到目标阈值；

当所述候选区域包含实例的被遮挡面积达到所述目标阈值时，将所述候选区域包含实例的遮挡分类信息确定为被遮挡。