[发明专利]基于个性化表情基的控制信息生成方法、装置、电子设备和可读存储介质

权利要求书

1.一种基于个性化表情基的控制信息生成方法，其特征在于，所述方法包括：

获得参考对象处于不同状态下的多张脸部图像；

基于预设的多个表情基模板和所述多张脸部图像，将各所述脸部图像中包含的脸部特征进行拆分，生成多个个性化表情基；

获得所述参考对象处于不同的设定表情下的视频帧；

根据所述视频帧和所述个性化表情基，生成与各所述设定表情对应的包含个性化表情基的控制信息，并保存所述控制信息。

2.根据权利要求1所述的基于个性化表情基的控制信息生成方法，其特征在于，所述方法还包括：

在直播过程中，获得针对构建的虚拟形象的控制表情指令，并获得所述控制表情对应的设定表情；

提取保存的与所述设定表情对应的控制信息；

根据所述控制信息控制所述虚拟形象进行所述控制表情的展示。

3.根据权利要求1所述的基于个性化表情基的控制信息生成方法，其特征在于，所述根据所述视频帧和所述个性化表情基，生成与所述设定表情对应的包含个性化表情基的控制信息的步骤，包括：

将各所述个性化表情基赋予基系数后进行组合得到组合表情基；

利用所述视频帧与所述组合表情基进行比对，并基于比对结果调整各所述基系数，直至满足预设要求时获得最终与所述设定表情对应的基系数组合；

基于所述基系数组合和所述个性化表情基生成控制信息。

4.根据权利要求3所述的基于个性化表情基的控制信息生成方法，其特征在于，所述视频帧包含三维特征点的点云信息；

所述利用所述视频帧与所述组合表情基进行比对，并基于比对结果调整各所述基系数，直至满足预设要求时获得最终与所述设定表情对应的基系数组合的步骤，包括：

将所述三维特征点的点云信息与所述组合表情基中的特征点进行对齐操作；

根据所述对齐操作的结果调整各所述基系数，直至满足预设要求时得到最终与所述设定表情对应的基系数组合。

5.根据权利要求4所述的基于个性化表情基的控制信息生成方法，其特征在于，将所述三维特征点的点云信息与所述组合表情基中的特征点进行对齐操作的步骤，包括：

针对所述组合表情基中的各个特征点，确定所述三维特征点的点云信息中与所述特征点对应的三维特征点，并将对应的特征点和三维特征点在坐标值上进行位置对齐约束；

确定与所述特征点对应的三维特征点所在的平面，将所述特征点与所述平面进行距离约束；

根据所述位置对齐约束和距离约束的结果，得到对齐操作结果。

6.根据权利要求3或4所述的基于个性化表情基的控制信息生成方法，其特征在于，所述视频帧包括二维图像信息；

利用所述视频帧与所述组合表情基进行比对，并基于比对结果调整各所述基系数，直至满足预设要求时获得最终与所述设定表情对应的基系数组合的步骤，包括：

将所述二维图像信息与所述组合表情基包含的二维信息进行比对操作；

根据所述比对操作的结果调整各所述基系数，直至满足预设要求时得到最终与所述设定表情对应的基系数组合。

7.根据权利要求6所述的基于个性化表情基的控制信息生成方法，其特征在于，所述将所述二维图像信息与所述组合表情基包含的二维信息进行比对操作的步骤，包括：

基于预设的纹理贴图对所述组合表情基进行渲染得到比对图像；

将所述比对图像中的关键点与所述二维图像信息中对应的关键点分别在坐标值上进行位置比对操作、在像素值上进行像素比对操作；

基于所述位置比对操作和所述像素比对操作的结果，得到比对操作结果。