[发明专利]肢体控制方法、装置和电子设备

说明书

本说明书实施例提出了一种肢体控制方法、装置和电子设备，其中，上述肢体控制方法中，获取视频流中的图像之后，对上述图像中包括的至少两个人体进行关节点检测，获得至少两个人体的目标关节点的位置。然后，根据目标关节点的位置，确定至少两个人体中每个人体的人脸区域，对上述人脸区域进行人脸识别，根据人脸识别的结果，确定当前与电子设备进行交互的控制者，从而可以实现对电子设备的控制者进行精准识别，然后从至少两个人体的目标关节点的位置中获取上述控制者的目标关节点的位置，并根据上述控制者的目标关节点的位置，确定控制者的手部区域，最后，对上述手部区域进行识别，控制电子设备执行与上述手部区域的识别结果对应的操作。

【技术领域】

本说明书实施例涉及互联网技术领域，尤其涉及一种肢体控制方法、装置和电子设备。

【背景技术】

随着计算机技术的发展和电子设备的普及，电子设备中人机交互应用的使用越来越广泛，在人机交互领域，多人场景的肢体交互是一个相对比较复杂的问题，尤其是在大型会场领域，往往希望仅允许少部分人进行肢体控制。

因此，需要提供一种肢体交互的控制方案，在大屏场景中，对大屏的控制者进行精准识别。

【发明内容】

本说明书实施例提供了一种肢体控制方法、装置和电子设备，以实现在大屏场景中，对大屏的控制者进行精准识别。

第一方面，本说明书实施例提供一种肢体控制方法，包括：获取视频流中的图像；对所述图像中包括的至少两个人体进行关节点检测，获得所述至少两个人体的目标关节点的位置；其中，所述目标关节点包括人体的预定数量的关节点；根据所述目标关节点的位置，确定所述至少两个人体中每个人体的人脸区域；对所述人脸区域进行人脸识别，根据所述人脸识别的结果，确定当前与电子设备进行交互的控制者；从所述至少两个人体的目标关节点的位置中获取所述控制者的目标关节点的位置，并根据所述控制者的目标关节点的位置，确定所述控制者的手部区域；对所述手部区域进行识别，控制所述电子设备执行与所述手部区域的识别结果对应的操作。

上述肢体控制方法中，获取视频流中的图像之后，对上述图像中包括的至少两个人体进行关节点检测，获得至少两个人体的目标关节点的位置。然后，根据目标关节点的位置，确定至少两个人体中每个人体的人脸区域，对上述人脸区域进行人脸识别，根据人脸识别的结果，确定当前与电子设备进行交互的控制者，从而可以实现对电子设备的控制者进行精准识别，然后从至少两个人体的目标关节点的位置中获取上述控制者的目标关节点的位置，并根据上述控制者的目标关节点的位置，确定控制者的手部区域，最后，对上述手部区域进行识别，控制电子设备执行与上述手部区域的识别结果对应的操作，从而可以实现在大屏场景下，仅对控制者响应肢体交互的精准控制。

其中一种可能的实现方式中，所述根据所述目标关节点的位置，确定所述至少两个人体中每个人体的人脸区域包括：根据所述目标关节点中头部和颈部的关节点的位置关系，确定所述至少两个人体中每个人体的人脸区域。

其中一种可能的实现方式中，所述对所述人脸区域进行人脸识别，根据所述人脸识别的结果，确定当前与电子设备进行交互的控制者包括：对每个人体的人脸区域进行人脸识别，将每个人脸区域的人脸识别结果与预先保存的控制者的人脸进行对比，确定当前与电子设备进行交互的控制者。

其中一种可能的实现方式中，所述确定当前与电子设备进行交互的控制者之后，还包括：计算所述视频流中当前帧的后一帧与所述当前帧中所述目标关节点的距离差矩阵；对所述距离差矩阵进行求解，根据所述距离差矩阵的求解结果，确定所述后一帧与所述当前帧中的人体均为所述控制者的人体时，为所述后一帧保留所述当前帧的人脸识别的结果。

其中一种可能的实现方式中，所述为所述后一帧保留所述当前帧的人脸识别的结果之后，还包括：每隔预定时长，重新执行所述对所述人脸区域进行人脸识别的步骤，刷新人脸识别的结果。