[发明专利]一种虚拟植入物体在实景中穿梭的方法及终端

摘要

本发明实施例公开了一种虚拟植入物体在实景中穿梭的方法及终端。该方法包括：从深度传感器获取的每一帧深度图像中提取每个实景物体的信息，每个实景物体的信息包括在深度传感器坐标系下的位置和轮廓大小；在深度传感器获取的相应的彩色图像中提取出每个实景物体的图像；将深度传感器坐标系转化为虚拟场景中的虚拟深度传感器坐标系，在虚拟场景中的相应位置生成与每个实景物体轮廓相同的掩膜，利用提取出的每个实景物体的图像对掩膜进行贴图；将虚拟场景进行投影后覆盖到同步的真实图像上。上述方法和终端可实现虚拟植入物体根据实景物体深度值穿梭于实景物体中而无任何穿帮现象。

主权项

1.一种虚拟植入物体在实景中穿梭的方法，其特征在于，所述方法包括：获取真实摄像机拍摄的真实图像、深度传感器与所述真实摄像机同步拍摄的深度图像和彩色图像，所述深度传感器摄像头的参数与真实摄像机的参数相匹配；根据深度传感器获取的深度图像与彩色图像，从每一帧深度图像中提取每个实景物体的信息，所述实景物体的信息包括所述实景物体在深度传感器坐标系下的位置、轮廓大小；根据深度图像与彩色图像的对应关系和深度图像中每个实景物体的信息，从获取的彩色图像中提取每个实景物体的图像；根据虚拟物体所在虚拟场景的虚拟摄像机的坐标计算出深度传感器在虚拟场景中的坐标；根据每个实景物体的信息和深度传感器在虚拟场景中的坐标，在虚拟场景中的相应位置生成与每个实景物体轮廓相同的掩膜；利用提取出的每个实景物体的图像为相应的掩膜进行贴图；将虚拟场景进行投影后覆盖到同步的真实图像上；其中，所述将虚拟场景进行投影后覆盖到同步的真实图像上，包括：将虚拟场景中的虚拟物体、实景物体的掩膜和掩膜贴图进行投影，将投影后的图像覆盖到真实摄像机拍摄的真实图像上。