[发明专利]一种基于眼睑特征信息的人员状态检测方法及装置

权利要求书

1.一种基于眼睑特征信息的人员状态检测方法，其特征在于，包括：

获得包含目标人员面部的人脸图像；

从所述人脸图像中检测出人脸特征点的二维位置信息，其中，所述人脸特征点包括人眼的上下眼睑的眼睑特征点；

基于所述人脸图像的人脸特征点的二维位置信息以及预设的三维人脸模型，构建所述目标人员对应的目标三维人脸模型，其中，所述目标三维人脸模型包括：基于所述眼睑特征点构建的所述人眼的上下眼睑；

基于所述目标三维人脸模型中所述人眼的上下眼睑指定位置处的眼睑空间点的三维位置信息以及预设的投影矩阵，确定出所述指定位置处的眼睑空间点在所述人脸图像中的投影点的投影位置信息；

基于所述人脸图像中所述指定位置对应的位置处的眼睑特征点的二维位置信息、所述指定位置处的眼睑空间点的三维位置信息以及所述投影位置信息，确定所述上下眼睑之间的当前开闭长度；

基于所述当前开闭长度，确定出所述目标人员的当前状态；

所述指定位置对应的位置处的眼睑特征点包括：所述人脸图像中上眼睑的中心位置处的第一中心点以及下眼睑的中心位置处的第二中心点；所述指定位置的眼睑空间点包括：所述目标三维人脸模型中上眼睑的中心位置处的第三中心点以及下眼睑的中心位置处的第四中心点；

所述基于所述人脸图像中所述指定位置对应的位置处的眼睑特征点的二维位置信息、所述指定位置处的眼睑空间点的三维位置信息以及所述投影位置信息，确定所述上下眼睑之间的当前开闭长度的步骤，包括：

基于所述第一中心点的二维位置信息以及所述第二中心点的二维位置信息，确定所述第一中心点与所述第二中心点之间的距离，作为第一距离；

基于所述第三中心点的三维位置信息以及所述第四中心点的三维位置信息，确定所述第三中心点和所述第四中心点之间的距离，作为第二距离；

基于第一投影点的投影位置信息以及第二投影点的投影位置信息，确定所述第一投影点与所述第二投影点之间的距离，作为第三距离，其中，所述第一投影点为所述第三中心点在所述人脸图像中的投影点，所述第二投影点为所述第四中心点在所述人脸图像中的投影点；

计算所述第一距离与所述第三距离的比值，作为第一比值；

将所述第二距离与第一比值的乘积，确定为所述上下眼睑之间的当前开闭长度。

2.如权利要求1所述的方法，其特征在于，所述从所述人脸图像中检测出人脸特征点的二维位置信息的步骤，包括：

基于预设的面部特征点检测模型，从所述人脸图像中检测出面部特征点的二维位置信息，其中，所述预设的面部特征点检测模型为：基于标注有人脸的各部位的面部特征点的第一样本图像训练所得的模型；

基于所述面部特征点的二维位置信息，从所述人脸图像中确定并截取出所述目标人员的人眼所在区域，作为人眼图像；

利用预设的眼睑特征点检测模型，从所述人眼图像中检测出所述人眼的上下眼睑的眼睑特征点，其中，所述预设的眼睑特征点检测模型为：基于标注有人眼的上下眼睑的眼睑特征点的第二样本图像训练所得的模型。

3.如权利要求2所述的方法，其特征在于，所述人眼图像包括左眼图像和右眼图像；

在所述利用预设的眼睑特征点检测模型，从所述人眼图像中检测出所述人眼的上下眼睑的眼睑特征点的步骤之前，所述方法还包括：

对所述左眼图像或所述右眼图像进行镜像处理，得到镜像图像；

对所述镜像图像以及未进行镜像的图像进行拼接，得到拼接图像，其中，若对所述左眼图像进行镜像处理，所述未进行镜像的图像为所述右眼图像；若对所述右眼图像进行镜像处理，所述未进行镜像的图像为所述左眼图像；

所述利用预设的眼睑特征点检测模型，从所述人眼图像中检测出所述人眼的上下眼睑的眼睑特征点的步骤，包括：

利用预设的眼睑特征点检测模型，从所述拼接图像中，检测出所述镜像图像中人眼的上下眼睑的眼睑特征点，以及所述未进行镜像的图像中人眼的上下眼睑的眼睑特征点；

对所述镜像图像中人眼的上下眼睑的眼睑特征点进行镜像处理，得到镜像后的眼睑特征点，以得到所述人眼图像中的人眼的上下眼睑的眼睑特征点。