[发明专利]图像处理方法、装置、终端设备及存储介质

权利要求书

1.一种图像处理方法，其特征在于，应用于终端设备，所述方法包括：

获取所述终端设备的视频流；

当从所述视频流中检测到目标对象的人脸信息时，从所述视频流中多张包括目标对象的图像中提取所述目标对象的头发特征图像，所述头发特征图像包括从包括所述目标对象的图像中头发所在区域提取的头发特征点；

建立三维空间坐标系，并获取各所述头发特征图像在所述三维空间坐标系中的三维空间坐标；

获取针对所述目标对象的头发的染发信息，并基于所述染发信息和预设模型生成器生成三维染发模型；

基于所述三维空间坐标和所述三维染发模型对所述目标对象的头发进行渲染；

其中，所述建立三维空间坐标系，并获取所述头发特征图像在所述三维空间坐标系中的三维空间坐标，包括：

将包括目标对象的图像与所述头发特征图像进行匹配，得到所述图像和所述头发特征图像的相对位置与姿态信息；

基于所述相对位置与姿态信息建立三维空间坐标系；

基于时间序列获取多张所述头发特征图像中各所述头发特征图像在所述三维空间坐标系中的三维空间坐标；

基于多张所述头发特征图像的所述三维空间坐标，采用光流金字塔算法跟踪多张所述头发特征图像的移动，以获得变换矩阵；

所述基于所述三维空间坐标和所述三维染发模型对所述目标对象的头发进行渲染，包括：

基于所述变换矩阵以及所述三维染发模型对所述目标对象的头发进行渲染。

2.根据权利要求1所述的方法，其特征在于，所述提取所述目标对象的头发特征图像，包括：

当从所述视频流中检测到目标对象的人脸信息时，获取包括所述目标对象的图像；

将所述图像输入已训练的特征提取模型中，获取由所述特征提取模型输出的头发特征图像。

3.根据权利要求1所述的方法，其特征在于，所述获取所述终端设备的视频流，包括：

当所述终端设备处于直播状态时，获取直播视频流。

4.根据权利要求1所述的方法，其特征在于，所述获取所述终端设备的视频流之后，还包括：

检测所述视频流中是否存在目标对象的人脸信息；

当所述视频流中未检测到所述目标对象的人脸信息时，输出提示信息，以提示所述目标对象调整位置信息。

5.根据权利要求1所述的方法，其特征在于，所述基于所述三维空间坐标和所述三维染发模型对所述目标对象进行渲染之后，还包括：

基于渲染后的目标对象实时生成视频；

播放所述视频。

6.一种图像处理装置，其特征在于，应用于终端设备，所述装置包括：

视频流获取模块，用于获取所述终端设备的视频流；

特征提取模块，用于当从所述视频流中检测到目标对象时，从所述视频流中多张包括目标对象的图像中提取所述目标对象的头发特征图像，所述头发特征图像包括从包括所述目标对象的图像中头发所在区域提取的头发特征点；

坐标获取模块，用于建立三维空间坐标系，并获取各所述头发特征图像在所述三维空间坐标系中的三维空间坐标；

模型获取模块，用于获取针对所述目标对象的头发的染发信息，并基于所述染发信息和预设模型生成器生成三维染发模型；

渲染模块，用于基于所述三维空间坐标和所述三维染发模型对所述目标对象的头发进行渲染；

其中，所述坐标获取模块，包括：

图像匹配子模块，用于将包括目标对象的图像与所述头发特征图像进行匹配，得到所述图像和所述头发特征图像的相对位置与姿态信息；所述包括目标对象的图像是从所述视频流中获取的；

坐标系建立子模块，用于基于所述相对位置与姿态信息建立三维空间坐标系；

第二坐标获取子模块，用于基于时间序列获取多张所述头发特征图像中各所述头发特征图像在所述三维空间坐标系中的三维空间坐标；

矩阵获取子模块，用于基于各所述头发特征图像的所述三维空间坐标，采用光流金字塔算法跟踪多张所述头发特征图像的移动，以获得变换矩阵；

所述基于所述三维空间坐标和所述三维染发模型对所述目标对象的头发进行渲染，包括：

基于所述变换矩阵以及所述三维染发模型对所述目标对象的头发进行渲染。