[发明专利]获取脸部关键点的3D坐标及3D脸部模型的方法和装置

说明书

公开了一种获取脸部关键点的3D坐标及3D脸部模型的方法和装置，其中的获取脸部关键点的3D坐标的方法包括：获取图像中的位于目标对象脸部的至少一2D关键点坐标；其中的图像为单目图像；确定所述至少一2D关键点坐标各自对应的所述目标对象的3D脸部模型中的脸部关键点的第一3D坐标，得到至少一第一3D坐标；根据所述至少一2D关键点坐标、所述至少一第一3D坐标以及采集所述图像的摄像装置的配置参数，确定所述至少一2D关键点坐标在所述摄像装置所在的三维坐标系中的第二3D坐标。本公开提供的技术方案有利于低成本且便捷准确的获得目标对象的脸部关键点的3D坐标。

技术领域

本公开涉及计算机视觉技术，尤其是涉及一种获取脸部关键点的3D坐标的方法、获取脸部关键点的3D坐标的装置、用于确定3D脸部模型的方法、用于确定3D脸部模型的装置、存储介质以及电子设备。

背景技术

在一些计算机视觉应用中，往往需要获得目标对象的脸部关键点(例如，眼球关键点等)的3D坐标。例如，在DMS(Driver Monitor System，驾驶员监控系统)中，往往需要根据驾驶员的眼球关键点的3D坐标，来确定驾驶员的视线方向。

如何低成本且便捷准确的获得目标对象的脸部关键点的3D坐标，是一个值得关注的技术问题。

发明内容

为了解决上述技术问题，提出了本公开。本公开的实施例提供了一种获取脸部关键点的3D坐标的方法、获取脸部关键点的3D坐标的装置、用于确定3D脸部模型的方法、用于确定3D脸部模型的装置、存储介质以及电子设备。

根据本公开实施例的第一个方面，提供了一种获取脸部关键点的3D坐标的方法，包括：获取图像中的位于目标对象脸部的至少一2D关键点坐标；其中，所述图像为单目图像；确定所述至少一2D关键点坐标各自对应的所述目标对象的3D脸部模型中的脸部关键点的第一3D坐标，得到至少一第一3D坐标；根据所述至少一2D关键点坐标、所述至少一第一3D坐标以及采集所述图像的摄像装置的配置参数，确定所述至少一2D关键点坐标在所述摄像装置所在的三维坐标系中的第二3D坐标。

根据本公开实施例的第二个方面，提供了一种用于确定3D脸部模型的方法，包括：获取预先设置的面向多个目标对象的通用3D脸部模型；获取待处理目标对象的模型缩放系数；根据所述模型缩放系数对所述通用3D脸部模型进行缩放调整，获得所述待处理目标对象的3D脸部模型。

根据本公开实施例的第三个方面，提供了一种获取脸部关键点的3D坐标的装置，包括：获取2D坐标模块，用于获取图像中的位于目标对象脸部的至少一2D关键点坐标；其中，所述图像为单目图像；确定模型3D坐标模块，用于确定所述获取2D坐标模块获取到的至少一2D关键点坐标各自对应的所述目标对象的3D脸部模型中的脸部关键点的第一3D坐标，得到至少一第一3D坐标；确定关键点3D坐标模块，用于根据所述获取2D坐标模块获取到的至少一2D关键点坐标、所述确定模型3D坐标模块获得的至少一第一3D坐标以及采集所述图像的摄像装置的配置参数，确定所述至少一2D关键点坐标在所述摄像装置所在的三维坐标系中的第二3D坐标。

根据本公开实施例的第四个方面，提供了一种用于确定3D脸部模型的装置，包括：获取脸部模型模块，用于获取预先设置的面向多个目标对象的通用3D脸部模型；获取缩放系统模块，用于获取待处理目标对象的模型缩放系数；模型调整模块，用于根据所述获取缩放系统模块获取到的模型缩放系数对所述获取脸部模型模块获取到的通用3D脸部模型进行缩放调整，获得所述待处理目标对象的3D脸部模型。

根据本公开实施例的第五个方面，提供了一种计算机可读存储介质，所述存储介质存储有计算机程序，所述计算机程序用于实现上述方法。

根据本公开实施例的第六个方面，提供了一种电子设备，该电子设备包括：处理器；用于存储所述处理器可执行指令的存储器；所述处理器，用于从所述存储器中读取所述可执行指令，并执行所述指令以实现上述方法。