[发明专利]生成三维人体模型的方法、装置及计算机可读存储介质

权利要求书

1.一种生成三维人体模型的方法，包括：

获取人物图像的局部二维特征点；

利用预先训练的第一神经网络对人物图像的局部二维特征点进行处理，获得人物图像基于人体形状模型的局部参数；

根据人物图像的局部二维特征点获取人物图像的人体区域；

利用预先训练的第二神经网络对人物图像的人体区域进行处理，获得人物图像基于人体形状模型的全局参数；

将所述局部参数与所述全局参数进行组合，获得人物图像基于人体形状模型的组合参数；

将所述组合参数输入人体形状模型，生成人物图像所对应的三维人体模型。

2.根据权利要求1所述的方法，还包括：

根据三维人体扫描数据，生成三维人体扫描数据基于人体形状模型的局部参数；

根据三维人体扫描数据，生成三维人体扫描数据的局部二维特征点；

将三维人体扫描数据的局部二维特征点作为训练数据，将三维人体扫描数据基于人体形状模型的局部参数作为训练标签，对所述第一神经网络进行训练。

3.根据权利要求2所述的方法，其中，所述根据三维人体扫描数据，生成三维人体扫描数据基于人体形状模型的局部参数包括：

对三维人体扫描数据进行人体形状模型回归处理，获得三维人体扫描数据基于人体形状模型的局部参数。

4.根据权利要求3所述的方法，其中，所述根据三维人体扫描数据，生成三维人体扫描数据的局部二维特征点包括：

对三维人体扫描数据进行人体形状模型回归处理，获得三维人体扫描数据基于人体形状模型的全局参数；

将三维人体扫描数据基于人体形状模型的局部参数和全局参数输入人体形状模型，生成三维人体扫描数据所对应的三维人体模型；

将三维人体扫描数据所对应的三维人体模型的顶点输入人体形状模型的人体节点回归器，获得三维人体扫描数据所对应的三维特征点；

利用相机投影矩阵将三维人体扫描数据所对应的三维特征点投影为三维人体扫描数据所对应的二维特征点；

从三维人体扫描数据所对应的二维特征点中，获取局部二维特征点。

5.根据权利要求4所述的方法，其中，所述相机投影矩阵为随机采样的相机投影矩阵。

6.根据权利要求4所述的方法，所述对所述第一神经网络进行训练包括：

利用三维人体扫描数据基于人体形状模型的局部参数，对所述第一神经网络的输出结果进行监督，以调整所述第一神经网络的第一神经网络参数；

将所述第一神经网络的输出结果与三维人体扫描数据基于人体形状模型的全局参数进行组合，获得三维人体扫描数据基于人体形状模型的组合中间参数；

将所述组合中间参数输入人体形状模型，生成三维人体扫描数据所对应的三维人体中间模型；

将所述三维人体中间模型的顶点输入人体形状模型的人体节点回归器，获得三维人体中间模型的三维特征点；

利用三维人体扫描数据所对应的三维特征点，对三维人体中间模型的三维特征点进行监督，以调整所述第一神经网络的第一神经网络参数。

7.根据权利要求1至6任一项所述的方法，其中，

所述局部二维特征点包括面部二维特征点、左手二维特征点以及右手二维特征点；

所述局部参数包括面部表情参数、左手手势参数以及右手手势参数；

所述全局参数包括身体姿态参数、身体形状参数以及相机参数。

8.根据权利要求7所述的方法，其中，所述第一神经网络包括：

面部子第一神经网络，被配置为接收所述面部二维特征点并输出所述面部表情参数；

左手子第一神经网络，用于接收所述左手二维特征点并输出所述左手手势参数；

右手子第一神经网络，用于接收所述右手二维特征点并输出所述右手手势参数。

9.根据权利要求8所述的方法，其中，面部子第一神经网络、左手子第一神经网络、右手子第一神经网络均包含全连接层、修正线性单元ReLU层以及丢弃Dropout层。