[发明专利]图像处理装置及方法

权利要求书

1.一种生成场景的三维表示的方法，所述场景包括排列于平面上的多个对 象，所述三维表示从所述场景的一个或多个视频图像中生成，所述视频图像包 括由视频摄像机从所述场景的视图中产生的所述平面上的所述对象，所述方法 包括：

处理已捕获的视频图像以便于从每个对象中提取一个或多个图像特征，

将所述一个或多个图像特征与样本图像特征进行比较，所述样本图像特征 来自于所述视频图像包含的可能的实例对象的预定集合，

根据所述图像特征与所述可能的实例对象的已存储的图像特征的比较来识 别所述对象，

生成对象路径数据，所述对象路径数据包括用于每个对象的对象标识数据， 所述对象标识数据标识各自的对象；并且所述对象路径数据提供所述视频图像 中的所述平面上的所述对象关于时间的位置；

计算投影矩阵，所述投影矩阵用于根据所述对象路径数据将所述对象中的 每个的位置从所述平面投影到所述平面的三维模型中，用于通过使用所述投影 矩阵根据所述对象路径数据在所述平面的所述三维模型中将所述对象的所述位 置投影到所述平面中，来生成所述场景的所述三维表示。

2.如权利要求1所述的方法，包括：

通过使用所述投影矩阵和预定的每个所述对象的假设高度，或使用所述投 影矩阵和观看所述三维表示的摄像机的模拟距离，根据所述对象路径数据在所 述平面的所述三维模型中将所述对象的所述位置投影到所述平面中，来生成所 述场景的所述三维表示，所述场景的所述三维表示包括所述平面上的所述多个 对象中的每一个的合成表示。

3.如权利要求1所述的方法，包括：

当已生成的三维模型在显示屏上被显示给用户时，响应于所述用户控制而 改变所述已生成的三维模型的相对视点。

4.如权利要求1所述的方法，包括：

为每个对象生成所述对象在所述平面中的相对方位的指示，以及

在所述对象路径数据中包括所述相对方位的所述指示，并且所述生成所述 场景的所述三维表示包括：

使用被提供有所述对象路径数据的所述方位的所述指示，对所述三维模型 的所述平面中的合成的对象确定方位。

5.如权利要求1所述的方法，其中每个所述对象是人，并且所述生成所述 对象路径数据包括：

为每个对象生成所述平面中的人的相对姿态、姿势或行为的指示，以及

在所述对象路径数据中包括所述人的所述相对姿态、姿势或行为的所述指 示，并且所述生成所述场景的所述三维表示包括：

访问数据存储器，所述数据存储器包括所述视频图像中的每个所述人的表 示的集合，所述集合中的所述表示中的每个对应于所述对象路径数据中的所述 人的所述相对姿态、姿势或行为的可能的指示中的一个，以及

根据所述对象路径数据中的所述人的相对姿态、姿势或行为的所述指示， 从每个所述人的可能的表示的所述集合中选择每个所述人的表示，并在所述三 维模型的所述平面中在根据所述对象路径数据的位置及方位处生成所选择的表 示。