[发明专利]面部解析方法、装置及计算机可读存储介质在审
申请号: | 201911125557.7 | 申请日: | 2019-11-18 |
公开(公告)号: | CN111783514A | 公开(公告)日: | 2020-10-16 |
发明(设计)人: | 刘颖璐;石海林;梅涛 | 申请(专利权)人: | 北京京东尚科信息技术有限公司;北京京东世纪贸易有限公司 |
主分类号: | G06K9/00 | 分类号: | G06K9/00;G06K9/62;G06N3/04 |
代理公司: | 中国贸促会专利商标事务所有限公司 11038 | 代理人: | 姜雍;方亮 |
地址: | 100086 *** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 面部 解析 方法 装置 计算机 可读 存储 介质 | ||
1.一种面部解析方法,包括:
将面部图像输入预先训练的面部解析神经网络;
利用面部解析神经网络中的语义感知子网络提取面部图像的语义特征,所述语义特征表示面部图像中的每个像素属于各个面部区域的概率;
利用面部解析神经网络中的边界感知子网络提取面部图像的边界特征,所述边界特征表示面部图像中的每个像素属于不同面部区域之间的边界的概率;
利用面部解析神经网络中的融合子网络对级联后的所述语义特征和所述边界特征进行处理,得到面部图像中的每个像素所属的面部区域。
2.如权利要求1所述的面部解析方法,还包括:
利用标注了每个像素所属的面部区域的样本面部图像,对面部解析神经网络进行训练,使得训练后的面部解析神经网络能够根据输入的面部图像输出面部图像中的每个像素所属的面部区域。
3.如权利要求2所述的面部解析方法,其中,训练面部解析神经网络时采用的损失函数包括语义感知子网络的损失函数及边界感知子网络的损失函数;
语义感知子网络的损失函数,是根据所述语义特征中的每个像素属于各个面部区域的预测概率以及所述语义特征中的每个像素实际所属的面部区域确定的;
边界感知子网络的损失函数,是根据所述边界特征中的每个像素属于不同面部区域之间的边界的预测概率以及所述边界特征中的每个像素实际是否属于所述边界确定的。
4.如权利要求3所述的面部解析方法,其中,所述利用面部解析神经网络中的融合子网络对级联后的所述语义特征和所述边界特征进行处理,得到面部图像中的每个像素所属的面部区域包括:
利用所述面部解析神经网络中的融合子网络对级联后的所述语义特征和所述边界特征进行处理,得到面部图像的融合特征,所述融合特征表示面部图像中的每个像素属于各个面部区域的预测概率以及面部图像中的每个像素属于所述边界的预测概率;
根据所述融合特征,确定面部图像中的每个像素所属的面部区域。
5.如权利要求4所述的面部解析方法,其中,训练面部解析神经网络时采用的损失函数还包括融合子网络的损失函数;
融合子网络的损失函数,是根据所述融合特征中的每个像素属于各个面部区域的预测概率、所述融合特征中的每个像素实际所属的面部区域以及所述融合特征中的每个像素实际是否属于所述边界确定的。
6.如权利要求3至5任一项所述的面部解析方法,其中,所述语义感知子网络的损失函数Ls为:
其中,N为语义特征中的像素总个数,i为语义特征中的像素标识,C为面部区域的类别总数,j为面部区域的类别标识;如果像素i实际属于面部区域j,则如果像素i实际不属于面部区域j,则为像素i属于面部区域j的预测概率。
7.如权利要求3至5任一项所述的面部解析方法,其中,所述边界感知子网络的损失函数Lb为:
其中,N为边界特征中的像素总个数,i为边界特征中的像素标识;如果像素i实际属于所述边界,则如果像素i实际不属于所述边界,则为像素i属于所述边界的预测概率。
8.如权利要求5所述的面部解析方法,其中,所述融合子网络的损失函数Lf为:
其中,N为融合特征中的像素总个数,i为融合特征中的像素标识,C为面部区域的类别总数,j为面部区域的类别标识;如果像素i实际属于面部区域j,则如果像素i实际不属于面部区域j,则为像素i属于面部区域j的预测概率;如果像素i实际属于所述边界,则wi1,如果像素i实际不属于所述边界,则wi=1。
9.如权利要求1所述的面部解析方法,其中,所述语义感知子网络包括卷积层;
所述利用语义感知子网络提取面部图像的语义特征包括:利用所述卷积层对面部图像进行空洞卷积,得到卷积特征。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京京东尚科信息技术有限公司;北京京东世纪贸易有限公司,未经北京京东尚科信息技术有限公司;北京京东世纪贸易有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201911125557.7/1.html,转载请声明来源钻瓜专利网。
- 上一篇:货物补充方法、装置和系统
- 下一篇:图像处理方法、装置及计算机可读存储介质