[发明专利]视频换脸方法及装置、存储介质

说明书

本申请公开一种视频换脸方法及装置、存储介质，属于图像处理领域。该方法包括：获取换脸视频帧和融合视频帧，换脸视频帧是采用模板人脸图像替换目标视频帧中的目标人脸图像得到的，换脸视频帧包括模板人脸图像和目标人脸图像的背景图像，融合视频帧是将换脸视频帧中的模板人脸图像与背景图像融合得到的；对换脸视频帧进行三角剖分，得到至少一个换脸特征区域；对融合视频帧进行三角剖分，得到至少一个融合特征区域，该至少一个融合特征区域与该至少一个换脸特征区域一一对应；根据每个换脸特征区域在换脸视频帧中的位置，校正该每个换脸特征区域对应的融合特征区域在融合视频帧中的位置，得到换脸融合视频帧。本申请有助于改善视频换脸效果。

技术领域

本申请涉及图像处理领域，特别涉及一种视频换脸方法及装置、存储介质。

背景技术

视频换脸是指通过图像处理算法，采用模板人脸替换视频图像中的目标人脸，并使模板人脸与视频图像融合的过程。

目前，在进行视频换脸时，对于视频图像中的目标人脸图像，首先根据预先训练好的网络模型生成模板人脸图像，然后使用该模板人脸图像替换视频图像中的目标人脸图像，并将模板人脸图像与视频图像进行柏松融合，得到换脸后的视频图像。

但是，上述方案进行视频换脸后，换脸后的视频图像存在一定的人脸抖动(例如人脸的五官发生偏移)，因此，上述视频换脸方案的视频换脸效果较差。

发明内容

本申请提供一种视频换脸方法及装置、存储介质，有助于解决换脸后的视频图像的人脸抖动问题，改善视频换脸效果。所述技术方案如下：

一方面，提供一种视频换脸方法，所述方法包括：

获取换脸视频帧和融合视频帧，所述换脸视频帧是采用模板人脸图像替换目标视频帧中的目标人脸图像得到的，所述换脸视频帧包括所述模板人脸图像和所述目标人脸图像的背景图像，所述融合视频帧是将所述换脸视频帧中的所述模板人脸图像与所述背景图像融合得到的；

对所述换脸视频帧进行三角剖分，得到至少一个换脸特征区域；

对所述融合视频帧进行三角剖分，得到至少一个融合特征区域，所述至少一个融合特征区域与所述至少一个换脸特征区域一一对应；

对于所述至少一个换脸特征区域中的每个换脸特征区域，根据所述每个换脸特征区域在所述换脸视频帧中的位置，校正所述每个换脸特征区域对应的所述融合特征区域在所述融合视频帧中的位置，得到换脸融合视频帧。

可选地，所述对所述换脸视频帧进行三角剖分，得到至少一个换脸特征区域，包括：

对所述换脸视频帧进行人脸对齐，确定出所述换脸视频帧中的多个换脸特征点；

根据所述多个换脸特征点对所述换脸视频帧进行三角剖分，得到所述至少一个换脸特征区域；

所述对所述融合视频帧进行三角剖分，得到至少一个融合特征区域，包括：

对所述融合视频帧进行人脸对齐，确定出所述融合视频帧中的多个融合特征点；

根据所述多个融合特征点对所述融合视频帧进行三角剖分，得到所述至少一个融合特征区域。

可选地，在得到所述换脸融合视频帧之后，所述方法还包括：

获取位于所述目标视频帧之前的n个第一视频帧和位于所述目标视频帧之后的m个第二视频帧，所述m和所述n均为大于或等于1的整数；

根据所述n个第一视频帧、所述换脸融合视频帧和所述m个第二视频帧，对所述换脸融合视频帧进行光影抖动处理，得到光影视频帧。

可选地，所述根据所述n个第一视频帧、所述换脸融合视频帧和所述m个第二视频帧，对所述换脸融合视频帧进行光影抖动处理，得到光影视频帧，包括：