[发明专利]物体分割方法、装置、设备、存储介质及程序

权利要求书

1.一种物体分割方法，其特征在于，包括：

确定视频序列中的包含有目标物体的扩展起点帧；

获取所述扩展起点帧中的第一特征块以及所述扩展起点帧的光流指导变形信息，其中，所述第一特征块为扩展起点帧中的目标物体特征块；

根据所述光流指导变形信息获得所述目标物体在所述扩展起点帧的相邻帧中的第二特征块；

根据所述目标物体在所述相邻帧中的注意力信息、第一特征块以及第二特征块，获得相邻帧的目标物体掩膜，所述目标物体掩膜用于得到所述视频序列的分割结果；其中，所述注意力信息用于表示区分所述目标物体和其他物体的信息。

2.根据权利要求1所述的方法，其特征在于，所述确定视频序列中的包含有目标物体的扩展起点帧包括：

将包含有与目标物体模板的相似度满足预定相似度要求的候选框的视频帧作为扩展起点帧。

3.根据权利要求2所述的方法，其特征在于：

所述目标物体模板包括：目标物体初始模板；或者

所述目标物体模板包括：目标物体扩展模板；

其中，所述目标物体扩展模板包括：所述获得的相邻帧的目标物体掩膜中的置信度满足预定置信度要求的相邻帧的目标物体掩膜。

4.根据权利要求3所述的方法，其特征在于，所述方法在获得相邻帧的目标物体掩膜之后，还包括下述步骤：

计算当前获得的各相邻帧的目标物体掩膜的置信度；

选取出置信度满足预定置信度要求的相邻帧的目标物体掩膜；

根据所述选取出的相邻帧的目标物体掩膜所对应的第二特征块获得掩膜特征；

其中，所述获得的掩膜特征被作为所述目标物体扩展模板的掩膜特征。

5.根据权利要求3所述的方法，其特征在于，所述确定视频序列中的包含有目标物体的扩展起点帧包括：

获取所述视频序列的各视频帧的各候选框的掩膜特征；

计算各掩膜特征分别与目标物体初始模板的掩膜特征之间的距离；

将距离小于预定距离的掩膜特征所在的视频帧作为扩展起点帧。

6.根据权利要求3所述的方法，其特征在于，所述确定视频序列中的包含有目标物体的扩展起点帧包括：

计算视频序列的未被作为扩展起点帧的各视频帧中的各候选框的掩膜特征，分别与目标物体扩展模板的掩膜特征之间的距离；

将距离小于预定距离的掩膜特征所在的视频帧作为扩展起点帧。

7.根据权利要求1至6中任一项所述的方法，其特征在于，所述根据所述光流指导变形信息获得所述目标物体在所述扩展起点帧的相邻帧中的第二特征块包括：

根据所述光流指导变形信息将扩展起点帧中的目标物体掩膜映射在相邻帧特征图中；

根据映射后的目标物体掩膜的覆盖区域获取目标物体在所述相邻帧中的第二特征块。

8.根据权利要求7所述的方法，其特征在于，所述目标物体在所述相邻帧中的注意力信息通过下述步骤包括：

根据所述第一特征块以及所述光流指导变形信息确定所述目标物体在所述相邻帧中的注意力信息。

9.根据权利要求8所述的方法，其特征在于，所述根据所述第一特征块以及所述光流指导变形信息确定所述目标物体在所述相邻帧中的注意力信息包括：

将所述第一特征块，基于所述光流指导变形信息，而映射在所述相邻帧特征图中所形成的特征块，提供给用于提取注意力信息的卷积神经网络，以利用该卷积神经网络获得所述目标物体在所述相邻帧中的注意力信息。