[发明专利]人脸三维重建方法、装置、电子设备及可读存储介质有效
申请号: | 201911215540.0 | 申请日: | 2019-12-02 |
公开(公告)号: | CN111161397B | 公开(公告)日: | 2022-08-12 |
发明(设计)人: | 贾贝;陈锦伟;马晨光 | 申请(专利权)人: | 支付宝(杭州)信息技术有限公司 |
主分类号: | G06T17/00 | 分类号: | G06T17/00;G06T7/33;G06V40/16 |
代理公司: | 北京众达德权知识产权代理有限公司 11570 | 代理人: | 刘进 |
地址: | 310000 浙江省杭州市*** | 国省代码: | 浙江;33 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 三维重建 方法 装置 电子设备 可读 存储 介质 | ||
本说明书实施例公开了一种人脸三维重建方法,获取多帧人脸图像,针对所述多帧人脸图像中的每帧人脸图像,将该帧人脸图像的二维关键点集进行三维映射,并根据三维映射得到的三维关键点集进行采样,得到该帧人脸图像的三维采样点集;从所述多帧人脸图像中选取一帧人脸图像作为目标人脸图像,针对剩余帧人脸图像中的每帧人脸图像,根据该帧人脸图像的三维采样点集和所述目标人脸图像的目标三维人脸数据进行坐标转换,并对坐标转换后的三维采样点集进行配准,得到该帧人脸图像的配准数据;根据每帧人脸图像的配准数据和所述目标人脸图像的三维关键点集进行三维重建,得到重建三维人脸图像。
技术领域
本说明书实施例涉及人脸图像处理技术领域,尤其涉及一种人脸三维重建方法、装置、电子设备及可读存储介质。
背景技术
随着人脸识别技术的飞速发展,人脸识别技术越来越多的应用在人们的日常生活中,人脸识别技术应用在例如车站的刷脸进站,超市的刷脸付钱和手机 APP的刷脸登录等场景中。
目前在刷脸应用场景中,在传统2D数据基础上,配合使用3D摄像头对人脸进行识别会提高人脸识别的效果,但是由于硬件和环境限制,单帧采集到的 3D数据往往质量很差,因此需要采集多帧3D数据,并进行3D人脸的重建,重建后的效果才能满足识别要求,而重建过程需要对采集的3D人脸数据进行大量的运算。
发明内容
本说明书实施例提供了一种人脸三维重建方法、装置、电子设备及可读存储介质,能够在确保三维人脸重建的准确度基础上提高重建效率。
本说明书实施例第一方面提供了一种人脸三维重建方法,包括:
获取多帧人脸图像,其中,所述多帧人脸图像中每帧人脸图像包括二维人脸数据和三维人脸数据;
针对所述多帧人脸图像中的每帧人脸图像,将该帧人脸图像的二维关键点集进行三维映射,并根据三维映射得到的三维关键点集进行采样,得到该帧人脸图像的三维采样点集;
从所述多帧人脸图像中选取一帧人脸图像作为目标人脸图像,针对剩余帧人脸图像中的每帧人脸图像,根据该帧人脸图像的三维采样点集和所述目标人脸图像的目标三维人脸数据进行坐标转换,并对坐标转换后的三维采样点集进行配准,得到该帧人脸图像的配准数据,其中,所述剩余帧人脸图像为所述多帧人脸图像中除所述目标人脸图像之外的所有人脸图像;
根据所述剩余帧人脸图像中每帧人脸图像的配准数据和所述目标人脸图像的三维关键点集,对所述目标人脸图像进行三维重建,得到重建三维人脸图像。
本说明书实施例第二方面提供了一种人脸三维重建装置,包括:
人脸图像获取单元,用于获取多帧人脸图像,其中,所述多帧人脸图像中每帧人脸图像包括二维人脸数据和三维人脸数据;
三维采样点获取单元,用于针对所述多帧人脸图像中的每帧人脸图像,将该帧人脸图像的二维关键点集进行三维映射,并根据三维映射得到的三维关键点集进行采样,得到该帧人脸图像的三维采样点集;
配准数据获取单元,用于从所述多帧人脸图像中选取一帧人脸图像作为目标人脸图像,针对剩余帧人脸图像中的每帧人脸图像,根据该帧人脸图像的三维采样点集和所述目标人脸图像的目标三维人脸数据进行坐标转换,并对坐标转换后的三维采样点集进行配准,得到该帧人脸图像的配准数据,其中,所述剩余帧人脸图像为所述多帧人脸图像中除所述目标人脸图像之外的所有人脸图像;
三维重建单元,用于根据所述剩余帧人脸图像中每帧人脸图像的配准数据和所述目标人脸图像的三维关键点集,对所述目标人脸图像进行三维重建,得到重建三维人脸图像。
本说明书实施例第三方面还提供了一种电子设备,包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序,所述处理器执行所述程序时实现上述人脸三维重建方法的步骤。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于支付宝(杭州)信息技术有限公司,未经支付宝(杭州)信息技术有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201911215540.0/2.html,转载请声明来源钻瓜专利网。
- 上一篇:一种由井水制备的具有防癌功效的矿泉水
- 下一篇:日志模板提取方法及装置