[发明专利]多面部表情捕捉方法、装置、电子设备及计算机存储介质

说明书

本公开实施例提供了一种多面部表情捕捉方法、装置、电子设备及计算机存储介质。其中，多面部通过多个图像获取装置捕捉；多个图像获取装置的图像捕捉范围为覆盖多面部活动的范围；该多面部表情捕捉方法可以包括：获取多面部的多幅图像；基于多面部活动的范围，对多幅图像进行人脸识别、表情识别和人脸姿态识别；基于人脸识别、表情识别和人脸姿态识别的结果，确定各面部的表情信息。本公开实施例克服了传统技术采用头戴式捕捉设备对人体肢体活动造成限制的缺陷，解决了如何在对多个近距离的面部进行表情捕捉时而不影响人体肢体动作执行的技术问题，实现了无需头戴式面部捕捉设备就可以捕捉面部表情的技术效果。

技术领域

本公开涉及图像处理技术领域，特别是涉及一种多面部表情捕捉方法、装置、电子设备及计算机存储介质。

背景技术

目前，在捕捉面部表情时，现有技术通常通过头戴式面部捕捉设备来实现。

随着实时互动虚拟角色的表演形式的普及，上述现有面部表情捕捉技术在对多个近距离的面部捕捉时，由于人体的肢体动作会造成多个头戴式面部捕捉设备上的摄像头相撞，或者人体的肢体相碰撞，从而影响到人体动作的执行。

因此，提供一种在对多个近距离的面部进行表情捕捉时而不影响人体肢体动作执行的方法是亟待解决的技术问题。

发明内容

本公开实施例的主要目的在于提供一种多面部表情捕捉方法、装置、电子设备及计算机存储介质，以解决如何在对多个近距离的面部进行表情捕捉时而不影响人体肢体动作执行的技术问题。

为了实现上述目的，第一方面，本公开提供了以下技术方案：

一种多面部表情捕捉方法，其中，所述多面部通过多个图像获取装置捕捉；所述多个图像获取装置的图像捕捉范围为覆盖所述多面部活动的范围；所述多面部表情捕捉方法包括：

获取所述多面部的多幅图像；

基于所述多面部活动的范围，对所述多幅图像进行人脸识别、表情识别和人脸姿态识别；

基于所述人脸识别、所述表情识别和所述人脸姿态识别的结果，确定各面部的表情信息。

进一步地，如果针对任一面部，获取多幅图像，则所述方法包括：

对所述多幅图像进行人脸识别、表情识别和人脸姿态识别的步骤，具体包括：

对所述任一面部的所述多幅图像进行人脸识别、表情识别和人脸姿态识别，得到多个识别结果；

基于所述人脸识别、所述表情识别和所述人脸姿态识别的结果，确定各面部的表情信息的步骤，具体包括：

确定各识别结果的融合权重；

通过所述融合权重，将所述各识别结果进行融合；

基于融合结果，确定所述任一面部的表情信息。

进一步地，所述确定各识别结果的融合权重的步骤，具体包括：

计算所述任一面部的各图像与各图像获取装置之间的距离、以及所述任一面部的所述各图像中的人脸的朝向；

确定所述任一面部的所述各图像中人脸特征点；

基于所述任一面部的所述各图像与所述各图像获取装置之间的所述距离，确定多个第一权重；

基于所述人脸特征点相对于所述人脸朝向的平均可信度，确定所述任一面部的任一表情的多个第二权重；

将分别对应于所述任一面部的所述各图像中的第一权重与第二权重求和，得到多个求和结果，作为所述各识别结果的所述融合权重。

为了实现上述目的，第二方面，本公开还提供了以下技术方案：