[发明专利]一种换脸视频生成方法、装置、设备以及存储介质

权利要求书

1.一种换脸视频生成方法，包括：

确定待换脸的初始视频；

响应于录制指令，在参考窗口和模仿窗口内同步播放所述初始视频，所述模仿窗口内播放的初始视频中包含待换脸区域，并录制包含至少一个目标用户的模仿视频，将所述模仿视频中所述目标用户的人脸区域实时替换至所述待换脸区域；

响应于录制结束指令，基于所述参考窗口内播放的初始视频、所述模仿窗口内播放的换脸初始视频以及预先选择的融合模式，生成换脸视频。

2.根据权利要求1所述的方法，其中，将所述模仿视频中所述目标用户的人脸区域实时替换至所述待换脸区域的步骤，包括：

针对所述模仿视频中至少一帧图像，识别所述目标用户的人脸关键点数据，基于所述人脸关键点数据确定所述目标用户的人脸区域图像，并将该帧图像的人脸区域图像替换至模仿窗口内播放的所述初始视频中与该帧图像的时间戳相同的图像帧的待换脸区域。

3.根据权利要求1或2所述的方法，其中，

所述模仿窗口内播放的初始视频中各图像帧的待换脸区域是根据该图像帧的人脸关键点识别结果预先确定的。

4.根据权利要求1所述的方法，其中，所述融合模式包括：单独展示模式和对比展示模式；

所述基于所述参考窗口内播放的初始视频、所述模仿窗口内播放的换脸初始视频以及预先选择的融合模式，生成换脸视频的步骤，包括：

当预先选择的融合模式为单独展示模式，将录制过程中所述模仿窗口内播放的视频确定为换脸视频；

当预先选择的融合模式为对比展示模式，将录制过程中所述模仿窗口内播放的视频和所述参考窗口内播放的初始视频相叠加的视频确定为换脸视频。

5.一种换脸视频生成装置，包括：

确定模块，用于确定待换脸的初始视频；

换脸模块，用于响应于录制指令，在参考窗口和模仿窗口内同步播放所述初始视频，所述模仿窗口内播放的初始视频中包含待换脸区域，并录制包含至少一个目标用户的模仿视频，将所述模仿视频中所述目标用户的人脸区域实时替换至所述待换脸区域；

生成模块，用于响应于录制结束指令，基于所述参考窗口内播放的初始视频、所述模仿窗口内播放的换脸初始视频以及预先选择的融合模式，生成换脸视频。

6.根据权利要求5所述的装置，其中，换脸模块，具体用于：

针对所述模仿视频中至少一帧图像，识别所述目标用户的人脸关键点数据，基于所述人脸关键点数据确定所述目标用户的人脸区域图像，并将该帧图像的人脸区域图像替换至模仿窗口内播放的所述初始视频中与该帧图像的时间戳相同的图像帧的待换脸区域。

7.根据权利要求5或6所述的装置，其中，

所述模仿窗口内播放的初始视频中各图像帧的待换脸区域是根据该图像帧的人脸关键点识别结果预先确定的。

8.根据权利要求5所述的装置，其中，所述融合模式包括：单独展示模式和对比展示模式；

所述生成模块，具体用于：

当预先选择的融合模式为单独展示模式，将录制过程中所述模仿窗口内播放的视频确定为换脸视频；

当预先选择的融合模式为对比展示模式，将录制过程中所述模仿窗口内播放的视频和所述参考窗口内播放的初始视频相叠加的视频确定为换脸视频。

9.一种电子设备，包括：

至少一个处理器；以及

与所述至少一个处理器通信连接的存储器；其中，

所述存储器存储有可被所述至少一个处理器执行的指令，所述指令被所述至少一个处理器执行，以使所述至少一个处理器能够执行权利要求1-4中任一项所述的方法。

10.一种存储有计算机指令的非瞬时计算机可读存储介质，其中，所述计算机指令用于使所述计算机执行根据权利要求1-4中任一项所述的方法。

11.一种计算机程序产品，包括计算机程序，所述计算机程序在被处理器执行时实现根据权利要求1-4中任一项所述的方法。