[发明专利]人物合成图像生成方法、装置、计算机设备及存储介质

说明书

本发明涉及智能决策领域，尤其涉及一种人物合成图像生成方法、装置、计算机设备及存储介质。其方法包括：对源图像进行特征提取，得到人体特征；对源图像进行姿态识别，得到源姿势图像；对姿态图像进行姿态识别，得到目标姿势图像；对目标姿势图像进行姿势特征编码，得到目标姿势特征；将源姿势图像、源图像和目标姿势图像进行拼接并映射至特征空间，得到部位姿势综合特征；通过基于注意力机制的图像合成模型，对人体特征、目标姿势特征和部位姿势综合特征进行特征分析，并输出人物合成图像。本发明可多个图像合成任务同时实现，满足用户的需求。同时，运用了注意力机制，使获得的人物合成图像更加趋于真实，细节更加清晰，提高了图像质量。

技术领域

本发明涉及智能决策领域，尤其涉及一种人物合成图像生成方法、装置、计算机设备及存储介质。

背景技术

随着多媒体技术的快速发展，元宇宙概念孕育而生，针对元宇宙概念，生成的虚拟人物形象尽可能真实，才能使用户沉浸其中，让用户有真实的体验感。其中，虚拟人物形象基于对人物图像进行合成得到。因此，人物合成图像方向的研究越来越受到重视。一般地，人物合成图像基于图像合成任务得到，根据不同的图像合成任务，得到对应的人物合成图像。由于在进行图像合成时，需要占用大量计算资源，现有的人物合成图像技术，通常只能实现一项图像合成任务；若同时执行多项图像合成任务，则需要降低合成质量。

发明内容

基于此，有必要针对上述技术问题，提供一种人物合成图像生成方法、装置、计算机设备及存储介质，以解决现有图像合成的人物图像效果单一，且质量不高的问题。

一种人物合成图像生成方法，包括：

获取源图像和姿态图像；

通过人体解析模型对所述源图像中的若干人体部位进行特征提取，得到若干部位特征；并将所述若干部位特征进行特征拼接，得到人体特征；

通过人体姿态识别模型对所述源图像进行姿态识别，得到所述源图像的源姿势图像；通过人体姿态识别模型对所述姿态图像进行姿态识别，得到所述姿态图像的目标姿势图像；

对所述目标姿势图像进行姿势特征编码，得到目标姿势特征；

将所述源姿势图像、所述源图像和所述目标姿势图像进行拼接，得到人体姿势拼接图像；将所述人体姿势拼接图像映射至特征空间，得到部位姿势综合特征；

通过基于注意力机制的图像合成模型，对所述人体特征、所述目标姿势特征和所述部位姿势综合特征进行特征分析，并输出人物合成图像，所述人物合成图像融合所述人体特征和所述目标姿势特征。

一种人物合成图像生成装置，包括：

图像获取模块，用于获取源图像和姿态图像；

人体特征模块，用于通过人体解析模型对所述源图像中的若干人体部位进行特征提取，得到若干部位特征；并将所述若干部位特征进行特征拼接，得到人体特征；

姿态识别模块，用于通过人体姿态识别模型对所述源图像进行姿态识别，得到所述源图像的源姿势图像；通过人体姿态识别模型对所述姿态图像进行姿态识别，得到所述姿态图像的目标姿势图像；

姿势特征模块，用于对所述目标姿势图像进行姿势特征编码，得到目标姿势特征；

综合特征模块，用于将所述源姿势图像、所述源图像和所述目标姿势图像进行拼接，得到人体姿势拼接图像；将所述人体姿势拼接图像映射至特征空间，得到部位姿势综合特征；

人物合成图像模块，用于通过基于注意力机制的图像合成模型，对所述人体特征、所述目标姿势特征和所述部位姿势综合特征进行特征分析，并输出人物合成图像，所述人物合成图像融合所述人体特征和所述目标姿势特征。