[发明专利]虚拟角色驱动方法及装置、电子设备和存储介质

说明书

本公开涉及一种虚拟角色驱动方法及装置、电子设备和存储介质。所述方法包括：根据双相位检测相机的参数构建双摄相机模型，根据第一相机和第二相机针对已知目标拍摄的图像、第一相机的初始参数和第二相机的初始参数，得到标定后的第一相机和标定后的第二相机；根据标定后的第一相机和标定后的第二相机针对待拟合目标拍摄的目标图像进行拟合，得到拟合结果；根据拟合结果驱动虚拟角色。本公开实施例使得双相位检测相机的标定过程简单化，标定结果更加准确。可以利用双相位检测相机方便、准确地对待拟合目标进行拟合。根据拟合结果驱动虚拟角色，可以降低虚拟角色的制作成本，以及提高拟合效果。

技术领域

本公开涉及计算机视觉技术领域，尤其涉及一种虚拟角色驱动方法及装置、电子设备和存储介质。

背景技术

3D技术特别是3D人物重建、表情捕捉和动作捕捉技术，在多媒体等各个应用领域都得到了的广泛应用。在各种应用场景中，如何方便地根据目标对象的拍摄图像精确地拟合3D模型后驱动虚拟角色，成为计算机视觉技术领域亟待解决的问题。

发明内容

有鉴于此，本公开提出了一种技术方案。

根据本公开的一方面，提供了一种虚拟角色驱动方法，所述方法包括：

根据双相位检测相机的参数构建双摄相机模型，所述双摄相机模型包括第一相机和第二相机；

根据第一相机和第二相机针对已知目标拍摄的图像、第一相机的初始参数和第二相机的初始参数，得到标定后的第一相机和标定后的第二相机；

根据标定后的第一相机和标定后的第二相机针对待拟合目标拍摄的目标图像进行拟合，得到拟合结果；

根据所述拟合结果驱动虚拟角色。

在一种可能的实现方式中，根据第一相机和第二相机针对已知目标拍摄的图像、第一相机的初始参数和第二相机的初始参数，得到标定后的第一相机和标定后的第二相机，包括：

根据第一相机针对已知目标拍摄的第一拍摄图像、第二相机针对已知目标拍摄的第二拍摄图像、第一相机的初始参数和第二相机的初始参数构建标定模型；

优化所述标定模型得到标定参数，并根据所述标定参数得到标定后的第一相机和标定后的第二相机。

在一种可能的实现方式中，根据第一相机针对已知目标拍摄的第一拍摄图像、第二相机针对已知目标拍摄的第二拍摄图像、第一相机的初始参数和第二相机的初始参数构建标定模型，包括：

根据所述已知目标上的关键点、关键点在第一拍摄图像中投影的第一投影点、关键点在第二拍摄图像中投影的第二投影点、已知目标相对于所述双相位检测相机的旋转矩阵和平移矩阵、第一相机的初始参数、第二相机的初始参数构建标定模型。

在一种可能的实现方式中，优化所述标定模型得到标定参数，并根据所述标定参数得到标定后的第一相机和标定后的第二相机，包括：

优化所述标定模型，得到第一相机的标定参数、第二相机的标定参数、旋转标定矩阵和平移标定矩阵；

根据所述第一相机的标定参数、所述第二相机的标定参数、所述旋转标定矩阵和所述平移标定矩阵，得到标定后的第一相机和标定后的第二相机，所述关键点和标定后的第一相机针对已知目标拍摄的第一拍摄图像中的第一投影点之间的距离最小，所述关键点和标定后的第二相机针对已知目标拍摄的第二拍摄图像中的第二投影点之间的距离最小。

在一种可能的实现方式中，标定后的第一相机针对已知目标拍摄的第一拍摄图像中的第一投影点的像素值和标定后的第二相机针对已知目标拍摄的第二拍摄图像中的第二投影点的像素值之间的差值最小。