[发明专利]数字人驱动方法、装置、设备及存储介质

说明书

本公开涉及一种数字人驱动方法、装置、设备及存储介质。本公开通过驱动数字人的控制指令，从运动匹配模块和运动控制模块中确定出执行该控制指令的目标模块。由于运动匹配模块可以根据控制指令，从多个预设动画片段中确定出与控制指令匹配的目标动画片段。运动控制模块可以将控制指令、数字人的历史运动骨骼信息和历史运动轨迹输入到预先训练完成的机器学习模型中，通过机器学习模型生成用于驱动数字人的骨骼运动信息。因此，本实施例可以在两种确定骨骼运动信息的方式之间自由的切换，使得不同场景下的控制指令可以通过不同的方式生成驱动数字人的骨骼运动信息，不需要构建状态转移图，因此节省了人工成本。

技术领域

本公开涉及信息技术领域，尤其涉及一种数字人驱动方法、装置、设备及存储介质。

背景技术

随着科技的不断发展，在构建虚拟世界的过程中，例如，构建元宇宙、虚拟主播的过程中，如何驱动数字人运动成为关键性技术，数字人可以理解为虚拟世界中的人物。例如，数字人需要在虚拟世界中进行自由运动、以及和周围环境进行交互等。

但是，现有技术通过状态转移图来驱动数字人运动，例如，状态转移图中的每个节点是一个动画片段，该状态转移图中的每个边是一个状态转移条件，如果某个边上的状态转移条件成立，则用于驱动数字人的动画片段从该边所连接的一个动画片段变化为该边所连接的另一个动画片段，使得用于驱动数字人的动画片段在不同动画片段之间转移。但是，这种方式需要通过手工的方式预先构建不同的状态转移条件和相应的动画片段，从而导致人工成本较高。

发明内容

为了解决上述技术问题或者至少部分地解决上述技术问题，本公开提供了一种数字人驱动方法、装置、设备及存储介质，本实施例可以在两种确定骨骼运动信息的方式之间自由的切换，使得不同场景下的控制指令可以通过不同的方式生成驱动所述数字人的骨骼运动信息，不需要构建状态转移图，也不需要预先构建不同的状态转移条件和相应的动画片段即可实现对数字人的驱动，因此节省了人工成本。

第一方面，本公开实施例提供一种数字人驱动方法，包括：

获取用于驱动数字人的控制指令；

根据所述控制指令，从运动匹配模块和运动控制模块中确定出执行所述控制指令的目标模块；

若所述目标模块是所述运动匹配模块，则根据所述控制指令，从多个预设动画片段中确定出与所述控制指令匹配的目标动画片段，并将所述目标动画片段中的骨骼运动信息作为驱动所述数字人的骨骼运动信息；

若所述目标模块是所述运动控制模块，则将所述控制指令、所述数字人的历史运动骨骼信息和历史运动轨迹输入到预先训练完成的机器学习模型中，通过所述机器学习模型生成用于驱动所述数字人的骨骼运动信息；

根据所述骨骼运动信息，驱动所述数字人运动。

第二方面，本公开实施例提供一种数字人驱动装置，包括：

获取模块，用于获取用于驱动数字人的控制指令；

第一确定模块，用于根据所述控制指令，从运动匹配模块和运动控制模块中确定出执行所述控制指令的目标模块；

第二确定模块，用于若所述目标模块是所述运动匹配模块，则根据所述控制指令，从多个预设动画片段中确定出与所述控制指令匹配的目标动画片段，并将所述目标动画片段中的骨骼运动信息作为驱动所述数字人的骨骼运动信息；

生成模块，用于若所述目标模块是所述运动控制模块，则将所述控制指令、所述数字人的历史运动骨骼信息和历史运动轨迹输入到预先训练完成的机器学习模型中，通过所述机器学习模型生成用于驱动所述数字人的骨骼运动信息；

驱动模块，用于根据所述骨骼运动信息，驱动所述数字人运动。

第三方面，本公开实施例提供一种电子设备，包括：

存储器；

处理器；以及

计算机程序；

其中，所述计算机程序存储在所述存储器中，并被配置为由所述处理器执行以实现如第一方面所述的方法。