[发明专利]虚拟项链试戴方法、装置、电子设备及存储介质

说明书

本发明提供一种虚拟项链试戴方法、装置、电子设备及存储介质，涉及虚拟试戴技术领域。该方法包括：获取待检测图像中用户的姿态信息，根据用户的姿态信息，裁剪获取待检测图像的脖子区域图像；采用预设的深度学习模型，获取各项链特征点在脖子区域图像的位置信息；将各项链特征点在脖子区域图像中位置信息映射到待检测图像中，使得可以获取到各项链特征点在待检测图像中的位置信息，并根据该位置信息可以动态调整项链在待检测图像中的试戴位置，避免需要用户手动调节项链的位置，方便了用户的试戴。

技术领域

本发明涉及虚拟试戴技术领域，特别涉及一种虚拟项链试戴方法、装置、电子设备及存储介质。

背景技术

近年来，图像识别和人机交互快速发展，产品展示终端出现了全新的模式。虚拟试戴(试穿)可以把3D产品叠加到用户动态影像上，人体动作与3D产品同步交互，展示出逼真的穿戴或试妆效果，比如，可以将已虚拟试戴(试穿)应用于珠宝、眼镜、手表、服装、箱包和鞋帽等行业，从而为用户提供良好的产品体验。

现有技术中，以虚拟试戴项链为例，主要通过虚拟试戴应用程序(ApplicationProgram，APP)获取试戴用户的颈部，将试戴3D项链产品叠加到用户动态影像上，从而展现出逼真的试戴项链的效果。

但现有的虚拟试戴APP在用户姿态发生变化时，需要用户手动调节项链的位置以及项链的长短等，交互起来比较麻烦。

发明内容

本发明的目的在于，针对上述现有技术中的不足，提供一种虚拟项链试戴方法、装置、电子设备及存储介质，可以解决现有技术中用户姿态发生变化时，需要用户手动调节项链的位置以及项链的长短等，用户试戴不方便的问题。

为实现上述目的，本发明实施例采用的技术方案如下：

第一方面，本发明实施例提供了一种虚拟项链试戴方法，包括：

获取待检测图像中用户的姿态信息，根据用户的姿态信息，裁剪获取待检测图像的脖子区域图像；采用预设的深度学习模型，获取各项链特征点在脖子区域图像的位置信息；将各项链特征点在脖子区域图像中位置信息映射到待检测图像中，得到项链在待检测图像中的试戴位置。

可选地，上述获取待检测图像中用户的姿态信息，根据用户的姿态信息，裁剪获取待检测图像的脖子区域图像，包括：根据待检测图像中用户的姿态信息和预设的人脸区域检测算法，确定待检测图像中的人脸区域；根据人脸区域，对待检测图像进行裁剪，获取待检测图像的脖子区域图像。

可选地，上述采用预设的深度学习模型之前，包括：获取预设训练样本中脖子区域图像和各项链特征点在脖子区域图像标注的位置信息；将预设训练样本中脖子区域图像作为训练数据、各项链特征点在所述脖子区域图像标注的位置信息作为训练标签进行训练，得到预设的深度学习模型。

可选地，上述获取预设训练样本中脖子区域图像和各项链特征点在脖子区域图像标注的位置信息，包括：获取预设训练样本的原始图像，标注各项链特征点在原始图像的位置信息；裁剪原始图像，得到预设训练样本中脖子区域图像；将各项链特征点在原始图像的位置信息映射到脖子区域图像中，得到项链在脖子区域图像的位置信息。

可选地，上述将各项链特征点在脖子区域图像中位置信息映射到待检测图像中，得到项链在待检测图像中的试戴位置，包括：根据各项链特征点在脖子区域图像的位置信息所处的第一坐标系和待检测图像所处的第二坐标系，将各项链特征点在脖子区域图像的位置信息映射到第二坐标系中，获取映射后的各项链特征点在待检测图像中的位置信息；根据各项链特征点在待检测图像中的位置信息，在待检测图像确定项链的试戴位置。