[发明专利]虚拟人视频的生成方法和装置

说明书

本公开提供了一种虚拟人视频的生成方法和装置，涉及人工智能领域，具体涉及计算机视觉、图像识别和深度学习技术。具体实现方案为：获取虚拟人视频和待添加素材，虚拟人视频中包括多帧虚拟人图像，获取待添加素材在虚拟人视频中的第一帧虚拟人图像的第一位置信息，并根据第一位置信息在第一帧虚拟人图像中确定多个跟踪点，对多个跟踪点进行跟踪处理，得到多个跟踪点在多帧虚拟人图像中其他帧虚拟人图像中的位置信息，并根据待添加素材、以及多个跟踪点在其他帧虚拟人图像中的位置信息，生成添加素材后的虚拟人视频，节约了资源(包括人力资源和物力资源)，提高了生成添加素材后的虚拟人视频的效率，且有助于提高用户与虚拟人之间的交互体验。

技术领域

本公开涉及人工智能领域，具体涉及计算机视觉、图像识别和深度学习技术，尤其涉及一种虚拟人视频的生成方法和装置。

背景技术

日前虚拟人在人们的日常生活中已经发挥了越来越多的作用，例如商场导航，银行交互等，尤其随着“元宇宙”概念的提出，虚拟人的热度更加高涨。

虚拟人视频中包括多帧虚拟人图像，在对虚拟人视频制作完成之后，可能需要对虚拟人的图像添加素材，如在虚拟人图像中添加工牌等，在现有技术中，通常是采用重新拍摄或者建模的方式重新制作/生成一个虚拟人视频。

然而，采用上述方法，需要耗费较大的人力和物力，且生成虚拟人视频的效率偏低。

发明内容

本公开提供了一种用于提高生成虚拟人视频的效率的虚拟人视频的生成方法和装置。

根据本公开的第一方面，提供了一种虚拟人视频的生成方法，包括：

获取虚拟人视频和待添加素材，所述虚拟人视频中包括多帧虚拟人图像；

获取所述待添加素材在所述虚拟人视频中的第一帧虚拟人图像的第一位置信息，并根据所述第一位置信息在所述第一帧虚拟人图像中确定多个跟踪点；

对所述多个跟踪点进行跟踪处理，得到所述多个跟踪点在所述多帧虚拟人图像中其他帧虚拟人图像中的位置信息，并根据所述待添加素材、以及所述多个跟踪点在所述其他帧虚拟人图像中的位置信息，生成添加素材后的虚拟人视频。

根据本公开的第二方面，提供了一种虚拟人视频的生成装置，包括：

第一获取单元，用于获取虚拟人视频和待添加素材，所述虚拟人视频中包括多帧虚拟人图像；

第二获取单元，用于获取所述待添加素材在所述虚拟人视频中的第一帧虚拟人图像的第一位置信息；

确定单元，用于根据所述第一位置信息在所述第一帧虚拟人图像中确定多个跟踪点；

跟踪单元，用于对所述多个跟踪点进行跟踪处理，得到所述多个跟踪点在所述多帧虚拟人图像中其他帧虚拟人图像中的位置信息；

生成单元，用于根据所述待添加素材、以及所述多个跟踪点在所述其他帧虚拟人图像中的位置信息，生成添加素材后的虚拟人视频。

根据本公开的第三方面，提供了一种电子设备，包括：

至少一个处理器；以及

与所述至少一个处理器通信连接的存储器；其中，

所述存储器存储有可被所述至少一个处理器执行的指令，所述指令被所述至少一个处理器执行，以使所述至少一个处理器能够执行第一方面所述的方法。

根据本公开的第四方面，提供了一种存储有计算机指令的非瞬时计算机可读存储介质，其中，所述计算机指令用于使所述计算机执行根据第一方面所述的方法。