[发明专利]一种提升表情基表达能力的方法、装置、设备及介质

权利要求书

1.一种提升表情基表达能力的方法，其特征在于，所述方法包括：

基于初始表情参数化模型提取连续多帧三维重建数据中每一帧三维重建数据的初始语义参数，并通过所述初始语义参数对应的第一表情基驱动预设的面部模型生成初始参数化结果；

将每一第一表情基下的初始参数化结果和三维重建数据进行对比，确定该第一表情基下的初始参数化结果和三维重建数据是否匹配；

若不匹配，则根据该第一表情基下初始参数化结果和三维重建数据的误差信息，生成表情残差数据；

使用所述表情残差数据调整所述初始表情参数化模型，并基于调整后的第二参数化模型提取所述连续多帧三维重建数据中每一帧三维重建数据的第二语义参数向量，并通过所述第二语义参数向量对应的第二表情基驱动所述面部模型生成与三维重建数据相匹配的第二参数化结果。

2.根据权利要求1所述的方法，其特征在于，所述三维重建数据中包含有预设数量的第一关键点；所述将每一第一表情基下的初始参数化结果和三维重建数据进行对比，包括：

根据所述第一表情基下三维重建数据中包含的所述第一关键点，在该第一表情基的初始参数化结果中，确定出与所述第一关键点表征同一位置的第二关键点；

将所述第一关键点的位置与对应所述第二关键点的位置进行对比。

3.根据权利要求2所述的方法，其特征在于，所述方法还包括：

通过对比所述第一关键点的位置与对应所述第二关键点的位置，得到所述第一表情基下初始参数化结果和三维重建数据的误差信息；

所述方法通过以下方式确定所述第一表情基下的展示表情图像和三维重建数据是否匹配：

若所述误差信息大于等于第一误差阈值，所述第一表情基下的展示表情图像和三维重建数据不匹配；

若所述误差信息小于第一误差阈值，所述第一表情基下的展示表情图像和三维重建数据匹配。

4.根据权利要求1所述的方法，其特征在于，所述根据第一表情基下初始参数化结果和三维重建数据的误差信息，生成表情残差数据，包括：

根据所述第一表情基下初始参数化结果和三维重建数据的误差信息，从所述第一表情基中，选择出目标表情基；

根据所述目标表情基下初始参数化结果和三维重建数据的误差信息和预设的中性表情模型，生成表情残差数据。

5.根据权利要求1所述的方法，其特征在于，所述根据第一表情基下初始参数化结果和三维重建数据的误差信息，生成表情残差数据，包括：

根据所述第一表情基包含的表情，对所述第一表情基进行分类，得到不同类型的所述第一表情基；

根据所述第一表情基下初始参数化结果和三维重建数据的误差信息，从各个类型的所述第一表情基中，分别选择出目标表情基；

根据所述目标表情基下初始参数化结果和三维重建数据的误差信息和预设的中性表情模型，生成表情残差数据。

6.根据权利要求1所述的方法，其特征在于，所述初始表情参数化模型中包含有第一数量的表情维度；所述使用所述表情残差数据对所述初始表情参数化模型进行调整，得到调整后的第二参数化模型，包括：

根据所述表情残差数据，生成针对所述初始表情参数化模型的额外纠偏维度；

将所述额外纠偏维度加入到所述初始表情参数化模型中，得到包含有第二数量表情维度的第二参数化模型。

7.根据权利要求1所述的方法，其特征在于，通过以下方式得到第二参数化模型：

使用所述表情残差数据调整所述初始表情参数化模型，得到新的初始表情参数化模型，并再次生成新的表情残差数据对新的初始表情参数化模型进行调整；

当每一第一表情基下的初始参数化结果和三维重建数据匹配时，将该初始表情参数化模型作为所述第二参数化模型。