[发明专利]图像处理方法、装置、设备、介质和电子设备

权利要求书

1.一种图像处理方法，包括：

利用三维重建的方式，确定第一人脸图像的身份参数、第二人脸图像的姿态参数和第三人脸图像的表情参数；

基于所述第一人脸图像的身份参数、所述第二人脸图像的姿态参数和所述第三人脸图像的表情参数生成二维的融合的渲染人脸图像；

拼接所述渲染人脸图像和外观提示图像，以得到拼接的图像特征；

基于所述拼接的图像特征生成输出图像，其中所述外观提示图像指示所述输出图像中用于所述渲染人脸图像的脸部区域的轮廓。

2.如权利要求1所述的图像处理方法，其中，基于所述拼接的图像特征生成输出图像包括：

利用残差网络对所述拼接的图像特征进行特征变换，以得到变换图像特征；

利用基于所述第一人脸图像生成的身份特征和所述外观提示图像对所述变换图像特征进行调整以生成所述输出图像。

3.如权利要求2所述的图像处理方法，其中，利用基于所述第一人脸图像生成的身份特征和所述外观提示图像对所述变换图像特征进行调整以生成所述输出图像包括：

基于所述外观提示图像生成所述脸部区域的掩膜图像；

基于所述掩膜图像，从所述变换图像特征确定所述脸部区域的内部图像特征和所述脸部区域的外部图像特征；

利用所述身份特征分别调整所述内部图像特征和所述外部图像特征，以得到调整后的内部图像特征和调整后的外部图像特征；

叠加所述调整后的内部图像特征和所述调整后的外部图像特征以得到调整后的图像特征；

基于所述调整后的图像特征确定所述输出图像。

4.如权利要求1-3任一项所述的图像处理方法，其中，利用三维重建的方式，确定第一人脸图像的身份参数、第二人脸图像的姿态参数和第三人脸图像的表情参数包括：

针对所述第一人脸图像、所述第二人脸图像和所述第三人脸图像中的每个人脸图像，

对该人脸图像进行三维重建，以得到对应于该人脸图像的三维人脸；

基于所述三维人脸确定该人脸图像的身份参数和表情参数；

基于所述三维人脸到该人脸图像的投影确定相机投影参数，作为该人脸图像的姿态参数；

提取所述第一人脸图像的身份参数、所述第二人脸图像的姿态参数以及所述第三人脸图像的表情参数。

5.如权利要求1-3任一项所述的图像方法，其中，基于所述第一人脸图像的身份参数、所述第二人脸图像的姿态参数和所述第三人脸图像的表情参数生成二维的融合的渲染人脸图像包括：

利用所述第一人脸图像的身份参数和所述第三人脸图像的表情参数构建融合的三维人脸；

基于所述第三人脸图像的姿态参数对所述融合的三维人脸进行投影，以得到二维的所述渲染人脸图像。

6.如权利要求1-3任一项所述的图像处理方法，其中，所述外观提示图像是通过在所述第三人脸图像中移除所述脸部区域的像素生成的。

7.如权利要求1-3任一项所述的图像处理方法，其中，所述渲染人脸图像具有第一通道数，所述外观提示图像具有第二通道数，

拼接所述渲染人脸图像和外观提示图像，以得到拼接的图像特征包括：

在通道维度上对所述渲染人脸图像和所述外观提示图像进行拼接，以生成所述拼接的图像特征，其中所述拼接的图像特征的通道数是所述第一通道数和所述第二通道数之和。