[发明专利]基于嵌入式视觉系统的实时人脸跟踪和人脸姿态选择的方法及装置、系统

权利要求书

1.一种实时人脸跟踪和人脸姿态选择的方法，其特征在于，所述方法包括：

在视频的一序列视频帧中接收视频图像；

在所述视频图像上执行人脸检测操作，以在所述视频图像中检测一组人脸；

基于该组检测人脸检测是否有新人进入到该视频内；

通过检测所述新人在后续的视频图像中的一序列人脸图像，在该视频中的后续视频图像中跟踪所述新人；

对于每一张包含该被跟踪新人的检测人脸的后续视频图像：

估计与所述检测人脸关联的姿态；以及

基于该估计姿态更新所述新人的最佳姿态；以及

一旦检测到所述新人已从该视频中消失，将所述新人对应于当前最佳姿态的检测人脸发送至服务器；其中仅传送该检测人脸序列中具有最佳姿态的检测人脸降低了网络带宽并提高了存储效率。

2.根据权利要求1所述的方法，其特征在于，在更新所述最佳姿态之后，还包括步骤：

将该已更新最佳姿态与阈值进行比较，其中所述阈值表示人脸姿态足够良好以执行人脸识别；

如果所述已更新最佳姿态满足阈值条件，则无需等待所述新人从所述视频中消失，直接将所述新人的对应于所述已更新最佳姿态的检测人脸传送至所述服务器。

3.根据权利要求2所述的方法，其特征在于，在将新人的对应于所述已更新最佳姿态的检测人脸传送至所述服务器之前，还包括：

确定已被认定足够好的所述新人的检测人脸是否在先前已被传至服务器；

如果先前已传至所述服务器，则不再将所述新人对应于已更新最佳姿态的检测人脸传送至所述服务器。

4.根据权利要求1所述的方法，其特征在于，检测所述新人从所述视频中消失还包括：

确定所述新人在最新处理的视频图像中不再具有对应的检测人脸图像；

检测在所述最新处理的视频图像中对应于所述新人在先前视频帧中检测人脸图像的位置处是否具有所述新人的对应人脸图像；

如果具有所述新人的对应人脸图像，则确定所述新人处于静止状态；

否则，确定所述新人已经从所述视频中消失。

5.根据权利要求1所述的方法，其特征在于，一旦确定所述新人处于静止状态，则所述方法包括：在后续的视频图像中继续监测所述新人，直至所述新人再次开始移动为止。

6.根据权利要求1所述的方法，其特征在于，在所述视频图像上执行人脸检测操作，以在所述视频图像中检测一组人脸包括：

在所述视频图像中识别一组移动区域；以及

针对已识别的所述一组移动区域中的每一个移动区域：将基于神经网络的人脸检测技术应用于所述移动区域，以检测所述移动区域内的一张或多张人脸。

7.根据权利要求1所述的方法，其特征在于，基于该组检测人脸检测是否有新人进入所述视频包括：

对第一已处理视频图像的一组标注检测人脸和紧接所述第一已处理视频图像之后的第二已处理视频图像中的一组未标注检测人脸执行人脸关联操作；以及

将不与所述第一已处理视频图像的一组标注检测人脸中的任一图像关联的所述紧接所述第一已处理视频图像之后的第二已处理视频图像中的一组未标注检测人脸中的每一张检测人脸识别为新人。

8.根据权利要求1所述的方法，其特征在于，后续视频图像中跟踪所述新人包括：对第一已处理视频图像中所述新人的已标记检测人脸和第一已处理视频图像之后的第二已处理视频图像中所述新人的一组未标注检测人脸之间执行直接人脸关联操作。

9.根据权利要求8所述的方法，其特征在于，由于所述新人的移动，所述新人在所述第一已处理视频图像中的已标记检测人脸的第一位置不同于所述新人在所述第二已处理视频图像中未标记检测人脸的第二位置。

10.根据权利要求8所述的方法，其特征在于，所述新人在所述第一已处理视频图像中的已标记检测人脸的边界框和所述新人在所述第二已处理视频图像中的未标记检测人脸的边界框互相交叠。