[发明专利]单目相机人脸重建方法及装置

权利要求书

1.一种单目相机人脸重建方法，其特征在于，包括以下步骤：

利用单目相机获取用户人脸处于不同角度的人脸视频；

将所述人脸视频输入至预设扩展的神经隐函数，得到所述用户人脸的人脸几何表示；以及

基于所述预设扩展的神经隐函数的隐向量，对齐并变形所述人脸视频中的每一帧人脸，并利用预设隐函数变形人脸几何表示，生成所述用户人脸的人脸几何重建结果。

2.根据权利要求1所述的方法，其特征在于，在将所述人脸数据输入至所述预设扩展的神经隐函数之前，还包括：

获取所述用户人脸的人脸三维扫描数据；

将所述人脸三维扫描数据中的三维信息编码至所述预设扩展的神经隐函数中，以使所述预设扩展的神经隐函数在输入所述隐向量时，输出对于三维人脸所在的空间中，获取查询点的有向距离。

3.根据权利要求2所述的方法，其特征在于，还包括：

将所述人脸几何重建结果转换为三维人脸网格。

4.根据权利要求3所述的方法，其特征在于，所述将所述人脸几何重建结果转换为三维人脸网格，包括：

在三维空间中采样多个查询点；

基于所述预设隐函数获取每个查询点的变形值，并基于所述变形值对所述每个查询点变形，得到变形后的多个查询点；

基于所述预设扩展的神经隐函数得到所述每个查询点的有向距离，并根据所述每个查询点的有向距离得到所述三维人脸网格。

5.一种单目相机人脸重建装置，其特征在于，包括：

第一获取模块，用于利用单目相机获取用户人脸处于不同角度的人脸视频；

输入模块，用于将所述人脸视频输入至预设扩展的神经隐函数，得到所述用户人脸的人脸几何表示；以及

重建模块，用于基于所述预设扩展的神经隐函数的隐向量，对齐并变形所述人脸视频中的每一帧人脸，并利用预设隐函数变形人脸几何表示，生成所述用户人脸的人脸几何重建结果。

6.根据权利要求5所述的装置，其特征在于，还包括：

第二获取模块，用于获取所述用户人脸的人脸三维扫描数据；

编码模块，用于将所述人脸三维扫描数据中的三维信息编码至所述预设扩展的神经隐函数中，以使所述预设扩展的神经隐函数在输入所述隐向量时，输出对于三维人脸所在的空间中，获取查询点的有向距离。

7.根据权利要求6所述的装置，其特征在于，还包括：

转换模块，用于将所述人脸几何重建结果转换为三维人脸网格。

8.根据权利要求7所述的装置，其特征在于，所述转换模块包括：

采样单元，用于在三维空间中采样多个查询点；

处理单元，用于基于所述预设隐函数获取每个查询点的变形值，并基于所述变形值对所述每个查询点变形，得到变形后的多个查询点；

生成单元，用于基于所述预设扩展的神经隐函数得到所述每个查询点的有向距离，并根据所述每个查询点的有向距离得到所述三维人脸网格。

9.一种电子设备，其特征在于，包括：存储器、处理器及存储在所述存储器上并可在所述处理器上运行的计算机程序，所述处理器执行所述程序，以实现如权利要求1-4任一项所述的单目相机人脸重建方法。

10.一种计算机可读存储介质，其上存储有计算机程序，其特征在于，该程序被处理器执行，以用于实现如权利要求1-4任一项所述的单目相机人脸重建方法。