[发明专利]人物交互关系识别方法、装置、电子设备

说明书

本公开提供一种人物交互关系识别方法、装置、电子设备，包括：识别目标图像中的人体对象和物体对象，获得人体对象的人体特征和物体对象的物体特征，并识别人体对象的动作姿态，获得人体对象的姿态特征；根据人体特征和姿态特征进行融合处理，获得人体对象的融合特征；根据融合特征和物体特征执行人物交互关系预测，获得人体对象与物体对象之间的人物交互关系识别结果。因此，本申请可以提高人物交互关系识别结果的准确性。

技术领域

本发明涉及图像识别技术领域，尤其涉及一种人物交互关系识别方法、装置、电子设备及存储介质。

背景技术

人与物关系检测(HOI-Det, Human Object Interaction Detection)技术是指给定一张输入图片，检测出输入图片中的人体与其周围物体的相对位置关系，并识别出人体与物体之间的交互关系。

目前的人物交互关系检测技术，仅在人与物之间进行消息传递，忽略了人与人、物与物之间的联系，导致了人物交互关系检测结果的不准确。

发明内容

有鉴于此，本公开实施例提供一种可提高识别结果准确性的人物交互关系合成方法、装置、电子设备，以至少部分的解决上述问题。

根据本公开的一方面，提供了一种人物交互关系识别方法，包括：识别目标图像中的人体对象和物体对象，获得所述人体对象的人体特征和所述物体对象的物体特征，并识别所述人体对象的动作姿态，获得所述人体对象的姿态特征；根据所述人体特征和姿态特征进行融合处理，获得所述人体对象的融合特征；根据所述融合特征和所述物体特征执行人物交互关系预测，获得所述人体对象与所述物体对象之间的人物交互关系识别结果。

根据本公开的另一方面，提供了一种人物交互关系识别装置，包括：识别模块，用于识别目标图像中的人体对象和物体对象，获得所述人体对象的人体特征和所述物体对象的物体特征，并识别所述人体对象的动作姿态，获得所述人体对象的姿态特征；融合模块，用于根据所述人体特征和姿态特征进行融合处理，获得所述人体对象的融合特征；预测模块，用于根据所述融合特征和所述物体特征执行人物交互关系预测，获得所述人体对象与所述物体对象之间的人物交互关系识别结果。

根据本公开的另一方面，提供一种电子设备，包括：处理器；以及存储程序的存储器，其中，所述程序包括指令，所述指令在由所述处理器执行时使所述处理器执行上述方面所述的人物交互关系识别方法。

根据本公开的另一方面，提供了一种存储有计算机指令的非瞬时计算机可读存储介质，其中，所述计算机指令用于使计算机执行上述方面所述的人物交互关系识别方法。

本公开的一个或多个实施例所提供的人物交互关系识别方案，通过结合人体对象的人体特征、姿态特征以获得人体对象的融合特征，并根据人体对象的融合特征与物体对象的物体特征，识别人体对象和物体对象之间的交互关系，可以提高识别结果的准确性。

附图说明

在下面结合附图对于示例性实施例的描述中，本公开的更多细节、特征和优点被公开，在附图中：

图1为本公开示例性实施例的人物交互关系识别方法的流程示意图。

图2为本公开另一示例性实施例的人物交互关系识别方法的流程示意图。

图3为本公开示例性实施例的人物交互关系识别处理方法的数据生成逻辑示意图。

图4为本公开另一示例性实施例的人物交互关系识别方法的流程示意图。

图5为本公开另一示例性实施例的人物交互关系识别方法的流程示意图。

图6为本公开另一示例性实施例的人物交互关系识别方法的流程示意图。

图7为本公开另一示例性实施例的人物交互关系识别方法的流程示意图。