[发明专利]一种人脸重构、直播方法、装置、设备及存储介质

权利要求书

1.一种人脸重构方法，其特征在于，包括：

从图像数据提取原始人脸数据的特征，作为原始人脸特征；

确定参考五官特征，所述参考五官特征用于表示五官数据在指定的维度下的特征；

在所述原始人脸特征的基础上添加所述参考五官特征，获得目标人脸特征；

使用所述目标人脸特征重构目标人脸数据，以使所述目标人脸数据具有在所述维度下调整之后的五官数据。

2.根据权利要求1所述的方法，其特征在于，所述从图像数据提取原始人脸数据的特征，作为原始人脸特征，包括：

确定人脸编码器，所述人脸编码器包括卷积层与全连接层；

将图像数据中的原始人脸数据输入所述卷积层进行卷积处理，输出中间人脸图像；

将所述中间人脸图像输入所述全连接层进行映射处理，输出原始人脸特征。

3.根据权利要求1所述的方法，其特征在于，所述确定参考五官特征，包括：

获取第一样本人脸数据、第二样本人脸数据，其中，所述第一样本人脸数据的五官数据与所述第二样本人脸数据的五官数据在指定的维度下存在差异；

从所述第一样本人脸数据中提取特征，作为第一样本人脸特征；

从所述第二样本人脸数据中提取特征，作为第二样本人脸特征；

将所述第一样本人脸特征减去所述第二样本人脸特征，获得所述五官数据在所述维度下表达的特征，作为参考五官特征。

4.根据权利要求3所述的方法，其特征在于，所述获取第一样本人脸数据、第二样本人脸数据，包括：

获取第一样本人脸数据；

在指定的维度下，对所述第一样本人脸数据中的五官数据进行调整，获得第二样本人脸数据。

5.根据权利要求3所述的方法，其特征在于，

所述从所述第一样本人脸数据中提取特征，作为第一样本人脸特征，包括：

确定人脸生成器，所述人脸生成器用于根据人脸特征重构人脸图像数据；

将所述第一样本人脸数据输入所述人脸生成器中进行反向传播，从而输出人脸特征，作为第一样本人脸特征；

所述从所述第二样本人脸数据中提取特征，作为第二样本人脸特征，包括：

确定人脸生成器，所述人脸生成器用于根据人脸特征重构人脸图像数据；

将所述第二样本人脸数据输入所述人脸生成器中进行反向传播，从而输出人脸特征，作为第二样本人脸特征。

6.根据权利要求1所述的方法，其特征在于，所述在所述原始人脸特征的基础上添加所述参考五官特征，获得目标人脸特征，包括：

对所述参考五官特征配置权重；

在所述原始人脸特征的基础上加上已配置权重的所述参考五官特征，获得目标人脸特征。

7.根据权利要求6所述的方法，其特征在于，所述在所述原始人脸特征的基础上添加所述参考五官特征，获得目标人脸特征，包括：

确定候选人脸数据的原始人脸特征；

将所述候选人脸数据的原始人脸特征部分或全部替换所述原始人脸数据的原始人脸特征。

8.根据权利要求1-7任一所述的方法，其特征在于，所述目标人脸特征具有N个向量；

所述使用所述目标人脸特征重构目标人脸数据，以使所述目标人脸数据具有在所述维度下调整之后的五官数据，包括：

确定人脸生成器，所述人脸生成器具有N+1个卷积层、N个全连接层；

在当前的卷积层中，接收第一特征人脸数据，其中，所述第一特征人脸数据初始为预设的数值；

在当前的卷积层中对所述第一特征人脸数据进行卷积处理，获得第二特征人脸数据；

若当前的卷积层为非末尾的卷积层，则在当前的全连接层中，将与当前的卷积层适配的向量映射为目标向量；

将所述第二特征人脸数据与所述目标向量进行归一化操作，作为新的第一特征人脸数据、输入至下一个卷积层；

若当前的卷积层为末尾的卷积层，则输出第二特征人脸数据为目标人脸数据。