[发明专利]视频名片生成方法、装置、计算机设备和存储介质

权利要求书

1.一种视频名片生成方法，其特征在于，包括：

确定待处理的初始图像对应的风格模式；

根据所述风格模式对所述初始图像进行风格转换，获得所述初始图像对应的目标图像；

根据所述目标图像与预设的模板视频以及介绍音频进行视频生成，获得所述目标图像对应的说话人视频；

对所述说话人视频进行布局重构，获得所述目标图像对应的视频名片。

2.根据权利要求1所述的视频名片生成方法，其特征在于，所述根据所述目标图像与预设的模板视频以及介绍音频进行视频生成，获得所述目标图像对应的说话人视频，包括：

将所述模板视频与所述目标图像输入动作驱动模型进行动作驱动，获得所述目标图像对应的头部动作视频；

将所述介绍音频与所述头部动作视频输入嘴型同步模型进行唇形合成，获得所述说话人视频。

3.根据权利要求2所述的视频名片生成方法，其特征在于，所述动作驱动模型包括关键点检测器、运动估计器以及图像生成器；

所述将所述模板视频与所述目标图像输入动作驱动模型进行动作驱动，获得所述目标图像对应的头部动作视频，包括：

将所述模板视频与所述目标图像输入所述关键点检测器进行处理，获得所述目标图像对应的第一关键点信息、所述模板视频对应的第二关键点信息；

确定所述第一关键点信息与所述第二关键点信息对应的仿射变换矩阵；

将所述目标图像、所述第一关键点信息、所述第二关键点信息以及所述仿射变换矩阵输入所述运动估计器进行运动估计处理，获得对应的映射关系图以及遮挡图；

将所述映射关系图、所述遮挡图以及所述目标图像输入所述图像生成器进行图像生成，获得所述头部动作视频。

4.根据权利要求3所述的视频名片生成方法，其特征在于，所述图像生成器包括编码器与解码器；所述将所述映射关系图、所述遮挡图以及所述目标图像输入图像生成器进行图像生成，获得所述头部动作视频，包括：

通过所述编码器对所述目标图像进行特征编码，获得中间特征向量；

根据所述映射关系图对所述中间特征向量进行仿射变换，获得仿射变换后的中间特征向量；

将仿射变换后的中间特征向量与所述遮挡图进行点乘，获得特征向量图；

通过所述解码器对所述特征向量图进行图像重建，获得所述头部动作视频。

5.根据权利要求2所述的视频名片生成方法，其特征在于，所述嘴型同步模型包括第一编码器、第二编码器以及解码器；

所述将所述介绍音频与所述头部动作视频输入嘴型同步模型进行唇形合成，获得所述说话人视频，包括：

将所述介绍音频输入所述第一编码器进行特征提取，获得第一特征向量，以及将所述头部动作视频输入所述第二编码器进行特征提取，获得第二特征向量；

将所述第一特征向量与所述第二特征向量进行拼接，获得拼接特征向量；

将所述拼接特征向量输入所述解码器进行解码，并将解码获得的图像序列，确定为所述说话人视频。

6.根据权利要求1所述的视频名片生成方法，其特征在于，所述对所述说话人视频进行布局重构，获得所述目标图像对应的视频名片之前，还包括：

根据图像分割算法对所述初始图像进行人像分割，获得对应的分割图像，并确定所述分割图像中的人像对应的人像位置坐标；

所述对所述说话人视频进行布局重构，获得所述目标图像对应的视频名片，包括：

基于所述人像位置坐标，确定预设的背景模板画框中的人像区域；

基于所述人像区域的尺寸大小，对所述说话人视频进行尺寸调整，获得尺寸调整后的说话人视频；

将尺寸调整后的说话人视频添加至所述背景模板画框中的人像区域，获得所述视频名片。

7.根据权利要求6所述的视频名片生成方法，其特征在于，所述将尺寸调整后的说话人视频添加至所述背景模板画框中的人像区域，获得所述视频名片之后，还包括：

获取预设的文字信息，并确定所述文字信息对应的起始位置与文字颜色；

基于所述文字颜色与所述起始位置，将所述文字信息添加至所述视频名片中。