[发明专利]图像处理方法、装置、存储介质及设备

说明书

本申请公开了一种图像处理方法、装置、存储介质及设备，属于计算机视觉技术领域。所述方法包括：获取待预测图像，对所述待预测图像进行特征提取；生成所述待预测图像的至少一个候选区域，将所述至少一个候选区域映射到所述待预测图像的特征图上，一个所述候选区域包含一个实例；基于目标网络对映射后的所述特征图进行处理，以透视掩码指示所述待预测图像中被遮挡实例的整体结构，以非透视掩码指示所述被遮挡实例的不可见部分，所述透视掩码及所述非透视掩码表示了所述被遮挡实例的相对遮挡关系。本申请具有类似于人类视觉的推理能力，能够合理推理透视实例分割，推理实例的不可见部分，该种图像处理方式智能性较佳，丰富了图像处理方式。

技术领域

本申请涉及计算机视觉技术领域，特别涉及一种图像处理方法、装置、存储介质及设备。

背景技术

实例分割是一种寻找图像内每一个实例以及确定每一个实例类别的图像识别技术，常用于无人驾驶领域中对前方车辆的精确定位，从而辅助选择下一步的驾驶控制策略。

其中，透视实例分割属于实例分割技术的一个新方向，旨在模仿人类能力对图像内每一个实例进行分割，其中，分割的对象还包括实例被遮挡的不可见部分。即，透视实例分割类似于人类视觉具备的推理能力，可以推理出该实例被遮挡的不可见部分，从而判断出一个完整的目标。

基于以上描述可知，透视实例分割在诸如无人驾驶等领域具有重大意义。因此，如何进行图像处理，以实现基于透视实例分割来推理图像内每一个实例被遮挡的不可见部分，成为了本领域技术人员关注的一个焦点。

发明内容

本申请实施例提供了一种图像处理方法、装置、存储介质及设备，能够进行透视实例分割。所述技术方案如下：

一方面，提供了一种图像处理方法，所述方法包括：

获取待预测图像，对所述待预测图像进行特征提取；

生成所述待预测图像的至少一个候选区域，将所述至少一个候选区域映射到所述待预测图像的特征图上，一个所述候选区域包含一个实例；

基于目标网络对映射后的所述特征图进行处理，以透视掩码指示所述待预测图像中被遮挡实例的整体结构，以非透视掩码指示所述被遮挡实例的不可见部分，所述透视掩码及所述非透视掩码表示了所述被遮挡实例的相对遮挡关系。

另一方面，提供了一种图像处理装置，所述装置包括：

获取模块，用于获取待预测图像；

特征提取模块，用于对所述待预测图像进行特征提取；

生成模块，用于生成所述待预测图像的至少一个候选区域；

映射模块，用于将所述至少一个候选区域映射到所述待预测图像的特征图上，一个所述候选区域包含一个实例；

处理模块，用于基于目标网络对映射后的所述特征图进行处理，以透视掩码指示所述待预测图像中被遮挡实例的整体结构，以非透视掩码指示所述被遮挡实例的不可见部分，所述透视掩码及所述非透视掩码表示了所述被遮挡实例的相对遮挡关系。

在一种可能的实现方式中，所述处理模块，还用于对于每个所述候选区域，对所述候选区域进行像素校正处理，得到所述候选区域的特征图；

其中，所述候选区域的特征图包括第一特征图、第二特征图和第三特征图，所述第一特征图和所述第二特征图的尺寸一致，且小于所述第三特征图的尺寸。

在一种可能的实现方式中，所述处理模块，还用于对于每个所述候选区域，将所述第一特征图、所述第二特征图和所述第三特征图进行特征融合处理；将得到的融合特征图输入所述目标网络的第一分支结构进行处理。