[发明专利]一种生成目标角色的动画表情的方法和系统

权利要求书

1.一种生成目标角色的动画表情的方法，所述方法由至少一个处理器执行，所述方法包括：

获取待预测台词文本；

使用训练好的表情生成模型处理所述待预测台词文本，得到与所述待预测台词文本对应的表情编码，以使用所述表情编码基于映射关系获取与所述动画表情对应的表情参数，并基于所述表情参数确定所述目标角色的动画表情；其中，所述表情编码用于表示所述动画表情的类别；

所述目标角色包括：动画角色、虚拟偶像、聊天机器人或者网站的在线客服；

其中：所述表情生成模型包括台词特征提取模型和表情编码生成模型，所述表情编码生成模型用于基于所述台词特征提取模型输出的台词特征向量获取与所述待预测台词文本对应的所述表情编码。

2.根据权利要求1所述的方法，其中，所述表情生成模型通过以下方式获得：

获取多个训练样本；其中，所述训练样本包括训练台词文本以及与所述训练台词文本对应的表情编码；

将所述训练台词文本作为输入数据；将所述表情编码作为标签；

利用所述多个训练样本训练初始表情生成模型，获得训练好的表情生成模型。

3.根据权利要求2所述的方法，其中，所述表情编码、所述映射关系、所述表情参数，以及所述训练台词文本通过以下方式获得：

使用面部捕捉设备从真人表演和/或包含面部动作的视频中获取多种动画表情的表情参数；

对所述多种动画表情进行编码，得到所述表情编码；

建立所述表情编码与所述表情参数的映射关系；

以文本形式保存所述真人表演和/或所述视频中使用的台词作为所述训练台词文本。

4.根据权利要求1所述的方法，其中，所述台词特征提取模型和所述表情编码生成模型均包括循环神经网络。

5.根据权利要求4所述的方法，其中，所述表情编码生成模型为双层带注意力机制的LSTM模型。

6.一种生成目标角色的动画表情的系统，其中，包括台词获取模块和表情编码获取模块；

所述台词获取模块用于获取待预测台词文本；

所述表情编码获取模块用于使用训练好的表情生成模型处理所述待预测台词文本，得到与所述待预测台词文本对应的表情编码，以使用所述表情编码基于映射关系获取与所述动画表情对应的表情参数，并基于所述表情参数确定所述目标角色的动画表情；其中，所述表情编码用于表示所述动画表情的类别；

所述目标角色包括：动画角色、虚拟偶像、聊天机器人或者网站的在线客服；

其中：所述表情生成模型包括台词特征提取模型和表情编码生成模型，所述表情编码生成模型用于基于所述台词特征提取模型输出的台词特征向量获取与所述待预测台词文本对应的所述表情编码。

7.根据权利要求6所述的系统，其中，所述表情生成模型通过以下方式获得：

获取多个训练样本；其中，所述训练样本包括训练台词文本以及与所述训练台词文本对应的表情编码；

将所述训练台词文本作为输入数据；将所述表情编码作为标签；

利用所述多个训练样本训练初始表情生成模型，获得训练好的表情生成模型。

8.根据权利要求7所述的系统，其中，所述表情编码、所述映射关系、所述表情参数，以及所述训练台词文本通过以下方式获得：

使用面部捕捉设备从真人表演和/或包含面部动作的视频中获取多种动画表情的表情参数；

对所述多种动画表情进行编码，得到所述表情编码；

建立所述表情编码与所述表情参数的映射关系；

以文本形式保存所述真人表演和/或所述视频中使用的台词作为所述训练台词文本。

9.根据权利要求6所述的系统，其中，所述台词特征提取模型和所述表情编码生成模型均包括循环神经网络。

10.一种生成目标角色的动画表情的装置，其中，包括处理器和存储设备，所述存储设备用于存储指令，当所述处理器执行指令时，实现如权利要求1～5中任一项所述的方法。