[发明专利]一种实现与虚拟角色实时互动的表情克隆方法及装置

摘要

本发明公开了一种实现与虚拟角色实时互动的表情克隆方法及装置，该方法涉及计算机图形学、虚拟现实等领域，包括以下步骤：一、对虚拟角色建模并绑定骨骼；二、建立虚拟角色的基础表情库；三、表情输入的训练，记录面部特征点在每个基础表情下的最大位移；四、表情追踪，通过运动捕捉设备，对真人面部表情变化进行录制，计算得到基础表情的权值；五、表情映射，将得到的基础表情权值实时传递给虚拟角色，并对相应骨骼旋转插值；六、虚拟角色表情的实时渲染输出。该方法能够快速、稳定、逼真地合成出虚拟角色表情，使得虚拟角色能够与真人实时而稳定的表情互动。

主权项

1.一种实现与虚拟角色实时互动的表情克隆方法，其特征在于，包括如下步骤：步骤1、对虚拟角色在三维软件中进行建模，得到虚拟角色模型，并对其进行骨骼的绑定，设定脖子关节为根关节；步骤2、建立基础表情库，所述基础表情库包括未经网格变形的初始表情和通过已绑定的骨骼对所述初始表情进行表情控制操作后得到的多种基础表情；步骤3、录制真人对应的所述初始表情和多种基础表情，获取初始表情下预定数量的面部特征点的初始空间坐标以及不同基础表情对应的所述面部特征点的位移空间坐标，根据所述面部特征点的初始空间坐标和位移空间坐标得到不同基础表情对应的所述面部特征点的最大位移，此时所述多种基础表情的权值为1；步骤4、实时捕捉真人的面部表情变化，得到真人对应的所述多种基础表情相应的权值，并利用所述权值对所述虚拟角色模型进行骨骼的旋转插值，实时渲染输出所述虚拟角色模型。