[发明专利]一种可穿戴物品的试戴方法、装置及电子设备

说明书

本申请实施例提供了一种可穿戴物品的试戴方法、装置及电子设备。该方法包括：获取用户的目标身体部位的视频流，该目标身体部位用于试戴所述可穿戴物品。通过光照模型获取目标身体部位的光照信息，并通过深度模型获取目标身体部位的深度信息。根据深度信息和视频流构建目标身体部位的身体模型，以及根据光照信息和深度信息在该身体模型上渲染可穿戴物品的虚拟模型。可以根据所获取到的视频流，确定光照信息和深度信息，而无需额外配置传感器。并且，根据光照信息和深度信息渲染可穿戴物品的虚拟模型，可以提高虚拟模型与身体模型的匹配度，从而提高用户通过电子设备试戴可穿戴物品的真实性。

技术领域

本申请实施例涉及电子设备技术领域，尤其涉及一种可穿戴物品的试戴方法、装置及电子设备。

背景技术

用户通过电子设备上的购物网站购买可穿戴物品时，无法接触到可穿戴物品的实物，用户可以通过增强现实（Augmented Reality，AR）技术试戴该可穿戴物品对应的虚拟模型，以起到试戴可穿戴物品的实物的效果。电子设备显示用户所要试戴的可穿戴物品的虚拟模型，并由电子设备采集用户用于穿戴该可穿戴物品的身体部位的图像。电子设备通过合成虚拟模型和采集到的身体部位的图像，得到合成后的图像。在该合成后的图像中，可穿戴物品的虚拟模型显示于用户对应的身体部位上，由此实现用户试戴可穿戴物品的实物的效果。

但是，合成后的图像可能会出现可穿戴物品的虚拟模型与身体部位之间匹配度较低的问题，例如可穿戴物品的虚拟模型与身体部位之间存在位置偏差、尺寸偏差、亮度偏差等。由此会严重降低用户试戴可穿戴物品的真实感。

发明内容

本申请实施例提供了一种可穿戴物品的试戴方法、装置及电子设备，用户在使用AR技术试戴可穿戴物品时，可以有效提高可穿戴物品的虚拟模型与对应身体部位之间的匹配度，从而有效提高试戴效果的真实感。

第一方面，本申请实施例提供了一种可穿戴物品的试戴方法，该方法包括：获取用户的目标身体部位的视频流，目标身体部位用于试戴可穿戴物品。通过光照模型获取该视频流中目标身体部位的光照信息，并通过深度模型获取该视频流中目标身体部位的深度信息。根据深度信息和视频流构建目标身体部位的身体模型。根据光照信息和深度信息在该身体模型上渲染可穿戴物品的虚拟模型。

根据上述方法，用户试戴可穿戴物品的过程中，可以根据所获取到的目标身体部位的视频流，确定该目标身体部位的光照信息和深度信息。这样，无需额外配置专用于采集光照信息和深度信息的传感器，从而可以有效缩减的生产成本，以及有效控制的体积。并且，根据用户的目标身体部位的光照信息和深度信息渲染可穿戴物品的虚拟模型，可以提高渲染得到的虚拟模型与目标身体部位的匹配度，从而提高用户试戴可穿戴物品的真实感。

在一种实现方式中，获取用户的目标身体部位的视频流，包括：通过单目摄像头实时获取目标身体部位的视频流。根据上述方法，可以通过自身原有的单目摄像头获取目标身体部位的视频流，而无需额外配置传感器等其他部件。并且，实时获取目标身体部位的视频流，可以保证所获取视频流的真实性，进而保证根据该实时获取的视频流所渲染的可穿戴物品的虚拟模型可以更加贴近用户的目标身体部位的实际特征，从而提高用户试戴可穿戴物品的真实感。

在一种实现方式中，通过光照模型获取视频流中目标身体部位的光照信息之前，还包括：获取第一样本视频流。通过光照模型获取第一样本视频流中每一帧图像的像素特征，该像素特征用于表征每一帧图像的光强信息。根据每一帧图像的像素特征，获取每一帧图像对应的估计光照强度和估计光源方向。根据每一帧图像对应的估计光照强度与每一帧图像对应的真实光照强度之间的损失距离，以及每一帧图像对应的估计光源方向和每一帧图像对应的真实光源方向之间的损失距离训练光照模型，以使得光照模型收敛。根据上述方法，预先构建用于估计光照信息的光照模型，以在获取到视频流之后，可以直接使用该光照模型估计目标身体部位的光照信息，提高获取光照信息的效率，进而提高渲染可穿戴物品的虚拟模型的效率。