[发明专利]基于视频时序的人脸年龄编辑方法

权利要求书

1.一种基于视频时序的人脸年龄编辑方法，其特征在于：

获取包含人脸的待编辑视频和待编辑年龄信息；

从待编辑视频的视频帧中裁剪出人脸图像，将人脸图像经仿射变换得到对齐后的人脸图像；

通过映射网络从待编辑视频第i帧图像的对齐后的人脸图像中获取人脸特征编码；

基于待编辑年龄信息从人脸年龄特征分类库中获取该待编辑年龄信息对应的人脸年龄特征编码；

将第i-1帧、第i帧和第i+1帧图像各自的人脸特征编码和人脸年龄特征编码结合后分别输入经训练的生成器，配合权重微调损失函数L_pt微调生成器权重参数；

其中，x_i为第i帧的人脸图像；为第i帧图像输入经训练的生成器所生成人脸图像；λ为超参数；N表示图像数量；L_LPIPS表示学习感知图片相似度损失函数；L_L2表示欧式距离损失函数；

将第i帧图像的人脸特征编码和人脸年龄特征编码结合后输入经微调权重的生成器，得到第i帧图像中人脸图像的人脸年龄编辑后图像；

将人脸年龄编辑后图像经仿射逆变换后贴合到第i帧图像中，得到人脸年龄编辑后的视频帧；

基于人脸年龄编辑后的视频帧生成人脸年龄编辑后的视频。

2.根据权利要求1所述的基于视频时序的人脸年龄编辑方法，其特征在于，在将人脸年龄编辑后图像经仿射逆变换后贴合到第i帧图像中之前，还包括：

将人脸年龄编辑后图像输入经训练的人脸语义分割网络进行分割，得到语义分割后的人脸年龄编辑后图像。

3.根据权利要求2所述的基于视频时序的人脸年龄编辑方法，其特征在于：所述人脸语义分割网络先通过8个下采样层进行人脸特征提取，得到热度图，然后再通过8个上采样层对得到的热度图进行放大，放大到与输入图片同样大小，最终对每个像素进行分类。

4.根据权利要求3所述的基于视频时序的人脸年龄编辑方法，其特征在于，所述人脸语义分割网络训练过程中采用的损失函数如下：

其中，y_i表示第i个真实目标值，是人脸像素为1，非人脸像素为0；x_i为第i帧图像的人脸年龄编辑后图像；w^*为人脸语义分割网络的参数；b为人脸语义分割网络的偏置。

5.根据权利要求1所述的基于视频时序的人脸年龄编辑方法，其特征在于，所述将第i-1帧、第i帧和第i+1帧图像各自的人脸特征编码和人脸年龄特征编码结合后分别输入经训练的生成器，配合权重微调损失函数L_pt微调生成器权重参数，包括：

当第i帧为待编辑视频的第1帧时，将第1帧、第1帧和第2帧三张图像各自的人脸特征编码和人脸年龄特征编码结合后分别输入经训练的生成器；

当第i帧为待编辑视频的最后一帧时，将前一帧、最后一帧和最后一帧三张图像各自的人脸特征编码和人脸年龄特征编码结合后分别输入经训练的生成器。