[发明专利]一种用于生成妆后效果的面部图像处理方法及系统

权利要求书

1.一种用于生成妆后效果的面部图像处理方法，其特征在于，方法包括：

获取待处理人脸图像以及对应的待处理语段描述；

将所述待处理语段描述输入至化妆语料抽取模型，以得到待用化妆语料；所述化妆语料抽取模型为基于训练样本集对FLAT模型进行训练得到的；所述训练样本集中的训练样本包括语段样本以及所述语段样本对应的化妆语料名称实体；

基于预设化妆词语数据库，确定所述待用化妆语料对应的预设标准化妆语料；

基于人脸关键点匹配算法，在所述待处理人脸图像上依据所述预设标准化妆语料进行渲染，以得到妆后效果图像。

2.根据权利要求1所述的用于生成妆后效果的面部图像处理方法，其特征在于，所述化妆语料抽取模型的训练过程，具体包括：

获取训练样本集；

构建初始FLAT模型；所述初始FLAT模型为基于transformer的神经网络模型；

将所述语段样本输入至所述初始FLAT模型，以得到初始化妆语料向量；

基于所述初始化妆语料向量和所述语段样本对应的化妆语料名称实体，对所述初始FLAT模型中各层神经元的参数值以及连接权重进行优化，以得到最优的FLAT模型；所述最优的FLAT模型为化妆语料抽取模型。

3.根据权利要求1所述的用于生成妆后效果的面部图像处理方法，其特征在于，所述基于预设化妆词语数据库，确定所述待用化妆语料对应的预设标准化妆语料，具体包括：

获取预设化妆词语数据库；所述预设化妆词语数据库中包括多个预设标准化妆语料；

对所述待用化妆语料进行分词，以得到关键化妆字词向量；

将所述关键化妆字词向量与所述预设化妆词语数据库中的预设标准化妆语料进行匹配，以得到所述关键化妆字词向量对应的预设标准化妆语料。

4.根据权利要求3所述的用于生成妆后效果的面部图像处理方法，其特征在于，将所述关键化妆字词向量与所述预设化妆词语数据库中的预设标准化妆语料进行匹配，具体包括：

针对所述预设化妆词语数据库中任一预设标准化妆语料，计算所述关键化妆字词向量与所述预设标准化妆语料的余弦距离；

判断所述余弦距离是否小于设定余弦阈值；

若所述余弦距离小于或等于设定余弦阈值，则表示所述关键化妆字词向量与所述预设标准化妆语料匹配；

若所述余弦距离大于设定余弦阈值，则表示所述关键化妆字词向量与所述预设标准化妆语料不匹配。

5.根据权利要求3所述的用于生成妆后效果的面部图像处理方法，其特征在于，对所述待用化妆语料进行分词，以得到关键化妆字词向量，具体包括：

采用jieba分词法对所述待用化妆语料进行分词。

6.根据权利要求1所述的用于生成妆后效果的面部图像处理方法，其特征在于，所述基于人脸关键点匹配算法，在所述待处理人脸图像上依据所述预设标准化妆语料进行渲染，以得到妆后效果图像，具体包括：

对所述待处理人脸图像进行卷积处理，以得到人脸特征图；

对所述人脸特征图进行傅里叶池化处理，以得到人脸非线性特征；

采用线性逻辑回归分类器将所述人脸非线性特征映射至所述待处理人脸图像上，以得到目标人脸关键点特征图；

使用三角剖分算法，对所述目标人脸关键点特征图进行三角分割，以得到待添加效果人脸面部图像；

依据所述预设标准化妆语料对所述待添加效果人脸面部图像进行渲染，以得到妆后效果图像。

7.一种用于生成妆后效果的面部图像处理系统，其特征在于，系统包括：

图像及语段获取模块，用于获取待处理人脸图像以及对应的待处理语段描述；

化妆语料抽取模块，用于将所述待处理语段描述输入至化妆语料抽取模型，以得到待用化妆语料；所述化妆语料抽取模型为基于训练样本集对FLAT模型进行训练得到的；所述训练样本集中的训练样本包括语段样本以及所述语段样本对应的化妆语料名称实体；

语料标准处理模块，用于基于预设化妆词语数据库，确定所述待用化妆语料对应的预设标准化妆语料；

化妆语料渲染模块，用于基于人脸关键点匹配算法，在所述待处理人脸图像上依据所述预设标准化妆语料进行渲染，以得到妆后效果图像。