[发明专利]一种虚拟对象唇形驱动系统

权利要求书

1.一种虚拟对象唇形驱动系统，其特征在于，

包括音频获取子系统、文本获取子系统、预处理子系统、生成子系统和驱动子系统，所述音频获取子系统、所述预处理子系统、所述生成子系统和所述驱动子系统依次连接，所述文本获取子系统与所述预处理子系统连接；

所述音频获取子系统，用于获取音频数据；

所述文本获取子系统，用于获取文本数据；

所述预处理子系统，用于对所述音频数据或所述文本数据进行预处理，得到片段序列；

所述生成子系统，用于将所述片段序列输入训练好的唇部动作系数模型进行训练，得到人脸表情系数；

所述驱动子系统，基于所述人脸表情系数驱动目标虚拟对象做出对应的动作。

2.如权利要求1所述的虚拟对象唇形驱动系统，其特征在于，

所述音频获取子系统包括音频获取模块和音频过滤模块，所述音频获取模块和所述音频过滤模块连接；

所述音频获取模块，用于获取目标音频；

所述音频过滤模块，用于过滤所述目标音频，得到音频数据。

3.如权利要求2所述的虚拟对象唇形驱动系统，其特征在于，

所述文本获取子系统包括文本获取模块和文本过滤模块，所述文本获取模块和所述文本过滤模块连接；

所述文本获取模块，用于获取目标文本；

所述文本过滤模块，用于过滤所述目标文本，得到文本数据。

4.如权利要求3所述的虚拟对象唇形驱动系统，其特征在于，

所述预处理子系统包括转换模块和截断模块，所述转换模块和所述截断模块依次连接；

所述转换模块，用于将所述音频数据转换为文本，得到转换文本数据；

所述截断模块，用于将所述转换文本数据或所述文本数据截断为片段序列。

5.如权利要求4所述的虚拟对象唇形驱动系统，其特征在于，

所述生成子系统包括构建模块、获取模块、训练模块和输入模块，所述构建模块、所述获取模块、所述训练模块和所述输入模块依次连接；

所述构建模块，用于构建神经网络；

所述获取模块，用于获取并划分公开数据集，得到训练集和验证集；

所述训练模块，用于使用所述训练集和所述验证集对所述神经网络进行训练和验证，得到唇部动作系数模型；

所述输入模块，用于将所述片段序列输入所述唇部动作系数模型中进行训练，得到人脸表情系数。

6.如权利要求5所述的虚拟对象唇形驱动系统，其特征在于，

所述获取模块包括获取单元、过滤单元和划分单元，所述获取单元、所述过滤单元和所述划分单元依次连接；

所述获取单元，用于获取公开数据集；

所述过滤单元，用于对所述公开数据集进行过滤，得到过滤数据集；

所述划分单元，用于对所述过滤数据集进行划分，得到训练集和验证集。

7.如权利要求6所述的虚拟对象唇形驱动系统，其特征在于，

所述训练模块包括训练单元和验证单元，所述训练单元与所述验证单元连接；

所述训练单元，用于使用所述训练集对所述神经网络进行训练，得到预训练模型；

所述验证单元，用于使用所述验证集对所述预训练模型进行验证，验证通过，得到唇部动作系数模型。