[发明专利]一种人脸的纹理贴图生成方法、系统及电子设备

权利要求书

1.一种人脸的纹理贴图生成方法，其特征在于：包括如下步骤:

步骤S1：获取目标对象的人脸网格模型和通过多个视角采集到的所述目标对象的多张人脸图像，所述人脸图像包括至少一人脸的正视图像和至少左右各一张侧视图像，并获取各个人脸图像对应的视角参数；

步骤S2：识别所述人脸的正视图像及侧视图像中的眼睛特征，并将眼睛特征剔除出所述人脸的正视图像及侧视图像，以获得眼睛图像及正视图像对应的缺眼正视图、缺眼侧视图；

步骤S3：基于所述人脸网格模型中每一网格的顶点对应的三维坐标，根据柱状投影方式计算每一顶点在纹理贴图上的二维坐标，以获得纹理网格图；及

步骤S4：基于所述眼睛图像、缺眼正视图及缺眼侧视图，对所述纹理网格图进行像素填充，获得人脸的纹理贴图。

2.如权利要求1中所述人脸的纹理贴图生成方法，其特征在于：上述步骤S2主要包括以下步骤：

步骤S21：获取所述人脸的正视图像及侧视图像中每一特征点对应的二维坐标；及

步骤S22：基于步骤S21中的二维坐标，将人脸的正视图像及侧视图像中眼睛特征对应的区域进行裁剪，以获得眼睛图像及正视图像对应的缺眼正视图、缺眼侧视图。

3.如权利要求1中所述人脸的纹理贴图生成方法，其特征在于：上述步骤S1主要包括以下步骤：

步骤S11：获取目标对象的人脸网格模型，所述人脸网格模型上包括多个网格及网格对应的顶点；及

步骤S12：获取所述人脸的正视图像、左视图像及右视图像及获取正视图像、左视图像及右视图像对应的视角参数。

4.如权利要求3中所述人脸的纹理贴图生成方法，其特征在于：步骤S11中获取目标对象的人脸网格模型包括但不限于多视图立体视觉的重建方法、单目视频重建及基于结构光重建的一种或多种。

5.如权利要求2中所述人脸的纹理贴图生成方法，其特征在于：步骤S4中具体包括：

步骤S41：基于缺眼正视图及缺眼侧视图及对应特征点的二维坐标，对所述纹理网格图进行像素填充；

步骤S42：判断网格是否位于正视图像上，若是则进入步骤S43，若否则进入步骤S44；

步骤S43：将所述眼睛图像对应的像素填充所述网格；及

步骤S44：根据该网格临近像素值进行填充。

6.一种人脸的纹理贴图生成系统，其特征在于，包括：

模型及图像获取单元，用于获取目标对象的人脸网格模型和通过多个视角采集到的所述目标对象的多张人脸图像，所述人脸图像包括至少一人脸的正视图像和至少左右各一张侧视图像，并获取各个人脸图像对应的视角参数；

特征分割单元，用于识别所述人脸的正视图像及侧视图像中的眼睛特征，并将眼睛特征剔除出所述人脸的正视图像及侧视图像，以获得眼睛图像及缺眼正视图、缺眼侧视图；

投影单元，用于基于所述人脸网格模型中每一网格的顶点对应的三维坐标，根据柱状投影方式计算每一顶点在纹理贴图上的二维坐标，以获得纹理网格图；及

填充单元，用于基于所述眼睛图像、缺眼正视图及缺眼侧视图，对所述纹理网格图进行像素填充，获得人脸的纹理贴图。

7.一种电子设备，包括存储器和处理器，其特征在于：所述存储器中存储有计算机程序，所述计算机程序被设置为运行时执行所述权利要求1至5任一项中所述人脸的纹理贴图生成方法；

所述处理器被设置为通过所述计算机程序执行所述权利要求1至5任一项中所述人脸的纹理贴图生成方法。