[发明专利]人脸关键点检测方法及装置有效
申请号: | 201711137971.0 | 申请日: | 2017-11-16 |
公开(公告)号: | CN107944367B | 公开(公告)日: | 2021-06-01 |
发明(设计)人: | 杨松 | 申请(专利权)人: | 北京小米移动软件有限公司 |
主分类号: | G06K9/00 | 分类号: | G06K9/00;G06N3/04 |
代理公司: | 北京英创嘉友知识产权代理事务所(普通合伙) 11447 | 代理人: | 魏嘉熹 |
地址: | 100085 北京市海淀区清河*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 关键 检测 方法 装置 | ||
1.一种人脸关键点检测方法,其特征在于,包括:
将3D平均人脸模型进行投影,得到所述3D平均人脸模型对应的人脸投影图;
将目标图像和所述人脸投影图输入第一卷积神经网络,得到所述目标图像和所述人脸投影图之间的对应关系图;
将所述目标图像和所述人脸投影图输入第二卷积神经网络,得到所述对应关系图对应的置信度图;
根据所述对应关系图和所述对应关系图对应的置信度图,确定人脸关键点检测结果;
其中,所述根据所述对应关系图和所述对应关系图对应的置信度图,确定人脸关键点检测结果,包括:根据所述目标图像对应的第一特征向量、所述对应关系图对应的第二特征向量和所述置信度图对应的第三特征向量,确定人脸关键点检测结果。
2.根据权利要求1所述的方法,其特征在于,根据所述目标图像对应的第一特征向量、所述对应关系图对应的第二特征向量和所述置信度图对应的第三特征向量,确定人脸关键点检测结果,包括:
根据所述目标图像对应的第一特征向量、所述对应关系图对应的第二特征向量和所述置信度图对应的第三特征向量,确定所述目标图像对应的3D特定人脸模型和投影矩阵;
根据所述目标图像对应的3D特定人脸模型和投影矩阵,确定人脸关键点检测结果。
3.根据权利要求1所述的方法,其特征在于,所述方法还包括:
对待检测人脸图像进行处理,得到处理后的待检测人脸图像;
将所述处理后的待检测人脸图像作为所述目标图像;
其中,所述处理包括缩放处理和/或归一化处理。
4.一种人脸关键点检测装置,其特征在于,包括:
投影模块,用于将3D平均人脸模型进行投影,得到所述3D平均人脸模型对应的人脸投影图;
第一运算模块,用于将目标图像和所述人脸投影图输入第一卷积神经网络,得到所述目标图像和所述人脸投影图之间的对应关系图;
第二运算模块,用于将所述目标图像和所述人脸投影图输入第二卷积神经网络,得到所述对应关系图对应的置信度图;
确定模块,用于根据所述对应关系图和所述对应关系图对应的置信度图,确定人脸关键点检测结果;
其中,所述确定模块包括:确定子模块,用于根据所述目标图像对应的第一特征向量、所述对应关系图对应的第二特征向量和所述置信度图对应的第三特征向量,确定人脸关键点检测结果。
5.根据权利要求4所述的装置,其特征在于,所述确定子模块包括:
第一确定子模块,用于根据所述目标图像对应的第一特征向量、所述对应关系图对应的第二特征向量和所述置信度图对应的第三特征向量,确定所述目标图像对应的3D特定人脸模型和投影矩阵;
第二确定子模块,用于根据所述目标图像对应的3D特定人脸模型和投影矩阵,确定人脸关键点检测结果。
6.根据权利要求4所述的装置,其特征在于,所述装置还包括:
处理模块,用于对待检测人脸图像进行处理,得到处理后的待检测人脸图像,并将所述处理后的待检测人脸图像作为所述目标图像;
其中,所述处理包括缩放处理和/或归一化处理。
7.一种人脸关键点检测装置,其特征在于,包括:
处理器;
用于存储处理器可执行指令的存储器;
其中,所述处理器被配置为执行权利要求1至3中任意一项所述的方法。
8.一种非临时性计算机可读存储介质,其特征在于,当所述存储介质中的指令由处理器执行时,使得处理器能够执行权利要求1至3中任意一项所述的方法。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京小米移动软件有限公司,未经北京小米移动软件有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201711137971.0/1.html,转载请声明来源钻瓜专利网。