[发明专利]图像处理方法及装置、处理器、电子设备及存储介质

说明书

本公开公开了一种图像处理方法及装置。该方法包括：获取第一待处理图像、所述第一待处理图像的第一深度图像、第二待处理图像和所述第二待处理图像的第二深度图像；所述第一待处理图像中包含待处理虚拟对象，所述第二待处理图像中包含第一物体；对所述待处理虚拟对象和所述第一物体进行渲染处理，以显示依据所述第一深度图像和所述第二深度图像确定的所述待处理虚拟对象和所述第一物体之间的位置关系，得到渲染图像。还公开了相应的装置。以实现基于深度图像获得可显示待处理虚拟对象和第一物体之间的位置关系的渲染图像。

技术领域

本公开涉及图像处理技术领域，尤其涉及一种图像处理方法及装置、处理器、电子设备及存储介质。

背景技术

增强现实(augmented reality，AR)技术是一种将虚拟信息与真实世界巧妙融合的技术，该技术可以将虚拟信息与真实环境实时地叠加到一个画面。虽然AR在过去数年间已经取得了长足的进步，但是在AR体验中可以发现，虚拟模型始终显示在真实环境的前面，无法反映虚拟模型和真实环境之间正确的位置关系，不能将虚拟模型和真实环境融为一体，导致用户的AR体验不够真实。

发明内容

本公开提供一种图像处理方法及装置、处理器、电子设备及存储介质。

第一方面，提供了一种图像处理方法，所述方法包括：获取第一待处理图像、所述第一待处理图像的第一深度图像、第二待处理图像和所述第二待处理图像的第二深度图像；所述第一待处理图像中包含待处理虚拟对象，所述第二待处理图像中包含第一物体；对所述待处理虚拟对象和所述第一物体进行渲染处理，以显示依据所述第一深度图像和所述第二深度图像确定的所述待处理虚拟对象和所述第一物体之间的位置关系，得到渲染图像。

在该方面中，通过将第一深度图像中的像素点的值作为第一待处理图像的深度值、将第二深度图像中的像素点的值作为第二待处理图像的深度值，可以确定第一待处理图像和第二待处理图像的深度信息，然后，根据第一待处理图像和第二待处理图像之间的相对深度信息来进行渲染处理，得到渲染图像，以实现准确显示待处理虚拟对象和第一物体之间的位置关系。

在一种可能实现的方式中，所述对所述待处理虚拟对象和所述第一物体进行渲染处理之前，所述方法还包括：对所述第二待处理图像和所述第二深度图像进行三维重建处理，获得所述第一物体的三维模型；所述对所述待处理虚拟对象和所述第一物体进行渲染处理，以显示依据所述第一深度图像和所述第二深度图像确定的所述待处理虚拟对象和所述第一物体之间的位置关系，得到渲染图像，包括：将所述第二待处理图像中根据所述第二深度图像确定的深度值大于第一阈值的像素点作为待更新像素点；将所述三维模型的第三深度图像中的候补像素点的像素值作为所述待更新像素点的深度信息，获得所述第一物体的更新后的深度信息；所述候补像素点在所述第三深度图像中的位置与所述待更新像素点在所述第二待处理图像中的位置相同；对所述待处理虚拟对象和所述第一物体进行渲染处理，以显示依据所述第一深度图像和所述第一物体的更新后的深度信息确定的所述待处理虚拟对象和所述第一物体之间的位置关系，得到所述渲染图像。

在该种可能实现的方式中，通过获取第一物体的更新后的深度信息，并将第一深度图像中的像素点的值作为第一待处理图像的深度值，以确定第一待处理图像和第二待处理图像之间的相对深度信息，然后根据该相对深度信息进行渲染处理，得到渲染图像，以提升显示待处理虚拟对象和第一物体之间的位置关系时的准确性。

在另一种可能实现的方式中，所述对所述第二待处理图像和所述第二深度图像进行三维重建处理，获得所述第一物体的三维模型，包括：确定所述第二待处理图像中深度值小于或等于所述第一阈值的待处理像素点，所述深度值根据所述第二深度图像确定；获取所述待处理像素点在相机坐标系下的三维坐标；将由所述相机坐标系下的三维坐标所确定的点作为三维点云数据；对所述三维点云数据进行三维建模处理，获得所述第一物体的三维模型。