[发明专利]在3D模型中结合视频元数据

摘要

本发明公开涉及在3D模型中结合视频元数据。通过定位目标的质心并且确定其与视场环境内的地平面的交叉点，用3D模型来表示校准后的摄像机的2D数据馈送的视场内被检测并跟踪的移动目标。用于该目标的适当的基于3D网格的体积模型是通过使用作为质心与所确定的地平面交叉点的函数的、对应2D图像的反向投影来初始化的。目标的被跟踪运动路径的非线性动态性表示为不同局部线性模型的集合。目标的纹理投影到3D模型上，并通过学习最小化模型运动的图像再投影误差的不同局部线性模型的加权组合，目标的2D轨迹升级到3D运动，以便驱动3D模型。

主权项

一种通过3D模型表示在2D视频数据中被跟踪目标的方法，所述方法包括：检测并跟踪目标在校准后的摄像机的2D数据馈送的视场环境中的运动，其中所述摄像机被校准成把所述摄像机放到摄像机视场环境的3D模型的空间高度、朝向与位置背景中；定位被跟踪目标的质心；确定质心与视场环境中的地平面的交叉点；通过使用作为质心与所确定的地平面交叉点的函数的、被跟踪目标的对应2D图像的反向投影，初始化适用于所述环境的3D模型的空间背景中的被跟踪目标的、基于3D网格的体积模型；把2D图像数据中目标的被跟踪运动路径的非线性动态性表示为不同局部线性模型的集合；把2D目标的纹理投影到3D模型上；及通过学习最小化模型运动的图像再投影误差的不同局部线性模型的加权组合，把目标的2D轨迹升级到3D运动，以便在基于动态网格的3D中驱动3D模型。