[发明专利]替换视频流中的对象的方法及计算机程序

摘要

本发明涉及替换视频流中的对象的方法。视场的立体视图被创建。其用于测量距离摄像机的距离并确定前景、背景和遮挡对象。立体视图可由3D摄像机提供或其可使用来自单一摄像机或多台摄像机的信号构造。将被替换的对象的结构可以是静态的或动态的。该方法不需要任何特殊设备来跟踪摄像机的位置并且其可被用于直播内容及存档的材料。本发明利用了当将被替换的对象被电子地被填充时的特殊情况中将被替换的源材料。

主权项

1.一种用于替换视频流中的对象的方法，包括：接收来自至少一台摄像机的一个或多个图像；分析所述一个或多个图像以提取摄像机位姿参数，所述摄像机位姿参数至少包括所述至少一台摄像机的坐标x、y和z及方向；使用通过所述至少一台摄像机观看的对象的深度表格创建立体视图，其中，所述深度表格定义从摄像机镜头沿着z轴到所述至少一台摄像机的视场中的每一个对象的距离，所述深度表格包括具有z值的多个像素，其中像素基于所述z值被分组到对象；使用所述立体视图和所述深度表格识别遮挡背景对象的前景对象；检测前景对象轮廓；用前景对象轮廓创建遮挡掩模；使用所述摄像机位姿参数计算替换图像；以及将所述遮挡掩模应用于所述替换图像。