[发明专利]一种用于生成妆后效果的面部图像处理方法及系统在审
申请号: | 202310339842.9 | 申请日: | 2023-03-31 |
公开(公告)号: | CN116402912A | 公开(公告)日: | 2023-07-07 |
发明(设计)人: | 沈玥;吕君蔚;唐义祺;李寰宇;朱玲 | 申请(专利权)人: | 上海贝芙汀科技有限公司;李寰宇 |
主分类号: | G06T11/00 | 分类号: | G06T11/00;G06T3/00;G06F40/279;G06F16/33;G06F40/289;G06V40/16;G06T7/11;G06N3/04;G06N3/08 |
代理公司: | 北京高沃律师事务所 11569 | 代理人: | 王爱涛 |
地址: | 200335 上海市长宁区新*** | 国省代码: | 上海;31 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 用于 生成 效果 面部 图像 处理 方法 系统 | ||
本发明公开一种用于生成妆后效果的面部图像处理方法及系统,涉及面部图像处理技术领域,方法包括:获取待处理人脸图像以及对应的待处理语段描述;将待处理语段描述输入至化妆语料抽取模型,以得到待用化妆语料;化妆语料抽取模型为基于训练样本集对FLAT模型进行训练得到的;训练样本集中的训练样本包括语段样本以及所述语段样本对应的化妆语料名称实体;基于预设化妆词语数据库确定待用化妆语料对应的预设标准化妆语料;基于人脸关键点匹配算法在待处理人脸图像上依据预设标准化妆语料进行渲染,以得到妆后效果图像。本发明将文字语段在人脸上的妆后效果以图像形式更加直观地显示。
技术领域
本发明涉及面部图像处理技术领域,特别是涉及一种用于生成妆后效果的面部图像处理方法及系统。
背景技术
目前,各种品牌、各种功用的化妆品层出不穷,不同的化妆品能够达到截然不同的效果。比如不同颜色的口红、眼影、腮红、粉底以及瞳色等等,不同的搭配也会产生的不同的效果。但是对于妆后效果,用户往往缺乏直观感受,无法清楚了解该妆容实操落于自己脸上之后的情况。
发明内容
本发明的目的是提供一种用于生成妆后效果的面部图像处理方法及系统,将文字语段在人脸上的妆后效果以图像形式更加直观地显示。
为实现上述目的,本发明提供了如下方案:
一种用于生成妆后效果的面部图像处理方法,包括:
获取待处理人脸图像以及对应的待处理语段描述;
将所述待处理语段描述输入至化妆语料抽取模型,以得到待用化妆语料;所述化妆语料抽取模型为基于训练样本集对FLAT模型进行训练得到的;所述训练样本集中的训练样本包括语段样本以及所述语段样本对应的化妆语料名称实体;
基于预设化妆词语数据库,确定所述待用化妆语料对应的预设标准化妆语料;
基于人脸关键点匹配算法,在所述待处理人脸图像上依据所述预设标准化妆语料进行渲染,以得到妆后效果图像。
可选地,所述化妆语料抽取模型的训练过程,具体包括:
获取训练样本集;
构建初始FLAT模型;所述初始FLAT模型为基于transformer的神经网络模型;
将所述语段样本输入至所述初始FLAT模型,以得到初始化妆语料向量;
基于所述初始化妆语料向量和所述语段样本对应的化妆语料名称实体,对所述初始FLAT模型中各层神经元的参数值以及连接权重进行优化,以得到最优的FLAT模型;所述最优的FLAT模型为化妆语料抽取模型。
可选地,所述基于预设化妆词语数据库,确定所述待用化妆语料对应的预设标准化妆语料,具体包括:
获取预设化妆词语数据库;所述预设化妆词语数据库中包括多个预设标准化妆语料;
对所述待用化妆语料进行分词,以得到关键化妆字词向量;
将所述关键化妆字词向量与所述预设化妆词语数据库中的预设标准化妆语料进行匹配,以得到所述关键化妆字词向量对应的预设标准化妆语料。
可选地,将所述关键化妆字词向量与所述预设化妆词语数据库中的预设标准化妆语料进行匹配,具体包括:
针对所述预设化妆词语数据库中任一预设标准化妆语料,计算所述关键化妆字词向量与所述预设标准化妆语料的余弦距离;
判断所述余弦距离是否小于设定余弦阈值;
若所述余弦距离小于或等于设定余弦阈值,则表示所述关键化妆字词向量与所述预设标准化妆语料匹配;
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于上海贝芙汀科技有限公司;李寰宇,未经上海贝芙汀科技有限公司;李寰宇许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202310339842.9/2.html,转载请声明来源钻瓜专利网。