[发明专利]一种无标记点面部捕捉装置及方法

权利要求书

1.一种无标记点面部捕捉装置，其特征在于：包括面捕头盔、计算机以及移动设备，所述计算机包括UE引擎软件，所述面捕头盔用于拍摄面部视频，并将所述面部视频发送至所述计算机显示，所述移动设备用于捕捉计算机显示的面部视频获取面部表情，生成虚拟人物角色的表情动画，并将所述表情动画传输到所述UE引擎软件；

所述移动设备为智能终端，包括景深摄像头和面部捕捉软件；

所述面部捕捉软件包括数据传输模块，并通过所述数据传输模块与所述UE引擎软件进行数据传输，所述UE引擎软件为UE4；

使用上述装置的无标记点面部捕捉方法包括如下步骤：

S1：所述面捕头盔获取面部视频，并将所述面部视频发送至所述计算机显示出来；

S2：所述景深摄像头捕捉所述计算机显示的面部视频；

S3：在所述面部捕捉软件中获取人脸表情；

S4：将S3所述的人脸表情与所述面部捕捉软件中提供的表情通道进行对比，计算出虚拟人物角色表情通道的值；

S5：在所述面部捕捉软件中，通过所述虚拟人物角色表情通道的值驱动虚拟人物角色运动，生成虚拟人物角色的表情动画；

S6：通过所述面部捕捉软件的数据传输模块将所述虚拟人物角色的表情动画传输到所述UE引擎软件中；

所述步骤S4包括：

S41：在所述面部捕捉软件中设置若干个表情通道，具体的，包括左右眨眼、左右挤眼、眼球的上下左右运动、下巴的前后左右运动、张嘴、撇嘴、微笑、酒窝、眼眉内外侧上下运动、脸颊鼓出和收缩、鼻子动作，为保证一个表情通道不会被另一个表情通道影响，为动画人物建立一个无任何表情的“中立表情”作为基准，使表情通道不相互干扰；

S42：在所述每个表情通道中根据表情的变化设置若干个表情偏移系数，具体的，在所述每个表情通道中设置无表情时的表情系数为0.0，表情极限是的表情系数为1.0，左眼全睁的表情系数为0.0，左眼全闭的表情系数为1.0，在0.0与1.0之间，根据表情的偏移程度，设置若干个不同的表情偏移系数；

S43：景深摄像头监测到人脸表情接近所述表情通道时，所述面部捕捉软件根据该表情通道的表情偏移系数计算出虚拟人物角色的表情通道的值，进行眨左眼动作时，景深摄像头监测到眼睛、嘴角、脸颊都产生了运动，ARKit根据上述动作各自归属的表情通道的表情偏移系数计算出虚拟人物角色对应的表情通道的值，多个虚拟人物角色的表情通道的值共同组成虚拟人物角色眨左眼的表情。