[发明专利]用于移除图像的背景的系统和方法

说明书

背景技术

诸如计算机游戏、多媒体应用等的许多计算应用使用控制来允许用户操纵游戏角色或应用的其他方面。通常使用例如控制器、遥控器、键盘、鼠标等等来输入这样的控制。不幸的是，这些控制可能是难以学习的，由此造成了用户和这些游戏及应用之间的障碍。此外，这些控制可能与这些控制所用于的实际游戏动作或其他应用动作不同。例如，使得游戏角色挥动棒球球棒的游戏控制可能不与挥动棒球球棒的实际运动相对应。

发明内容

此处所公开的是用于跟踪场景中的用户的系统和方法。例如，可以接收或观察诸如场景的深度图像等图像。可基于深度图像生成体素(voxel)的网格(grid)以便降采样该深度图像。例如，深度图像可包括多个像素，这些像素可被划分成部分或块。然后可为每个部分或块生成体素，使得所接收的深度图像被降采样到体素的网格中。

可以确定并移除或丢弃体素的网格的背景，使得与前景物体(诸如人类目标)相关联的一个或多个体素可以被隔离。根据一个实施例，目标识别、分析和跟踪系统可以确定背景。为了确定背景，目标识别、分析和跟踪系统可以确定体素的网格中可能正在移动和未移动的物体。目标识别、分析和跟踪系统可以丢弃可能未在移动的作为背景的物体。

目标识别、分析和跟踪系统随后可以处理与可被丢弃的人类目标相关联的体素。例如，目标识别、分析和跟踪系统可以为被隔离的人类目标确定一个或多个肢端，可以确定这些肢端的尺寸，可以为被隔离的人类目标生成模型等。

提供本发明内容以便以简化形式介绍将在以下具体实施方式中进一步描述的一些概念。本发明内容并不旨在标识出所要求保护的主题的关键或必要特征，也不旨在用于限定所要求保护的主题的范围。此外，所要求保护的主题不限于解决在本公开的任一部分中提及的任何或所有缺点的实现。

附图说明

图1A和1B示出了目标识别、分析和跟踪系统的示例实施例，其中用户正在玩游戏。

图2示出了可在目标识别、分析和跟踪系统中使用的捕捉设备的示例实施例。

图3示出可用于解释目标识别、分析和跟踪系统中的一个或多个姿势和/或动画化目标识别、分析和跟踪系统所显示的化身或屏幕上角色的计算环境的示例实施例。

图4示出可用于解释目标识别、分析和跟踪系统中的一个或多个姿势和/或动画化目标识别、分析和跟踪系统所显示的化身或屏幕上角色的计算环境的另一示例实施例。

图5描绘了用于处理场景的深度信息的示例方法的流程图。

图6示出可被捕捉或观察的深度图像的示例实施例。

图7A-7B示出被降采样的深度图像的一部分的示例实施例。

说明性实施例的具体实施方式

图1A和1B示出目标识别、分析和跟踪系统10的配置的示例实施例，其中用户18正在玩拳击游戏。在一示例实施例中，目标识别、分析和跟踪系统10可用于识别、分析和/或跟踪诸如用户18等的人类目标。

如图1A所示，目标识别、分析和跟踪系统10可以包括计算环境12。计算环境12可以是计算机、游戏系统或控制台等等。根据一示例实施例，计算环境12可包括硬件组件和/或软件组件，使得计算环境12可用于执行诸如游戏应用、非游戏应用等应用。在一个实施例中，计算环境12可以包括处理器，诸如标准化处理器、专用处理器、微处理器等可以执行指令的处理器，所述指令包括例如用于接收深度图像的指令、基于深度图像生成体素的网格的指令、确定网格中的一个或多个体素是否与背景相关联的指令、丢弃与背景相关联的一个或多个体素以隔离与深度图像中的前景物体相关联的体素的指令、用被隔离的前景物体来处理网格的指令，这将在下面进行更加详细的描述。

如图1A所示，目标识别、分析和跟踪系统10还可包括捕捉设备20。捕捉设备20可以是例如照相机，所述照相机可用于在视觉上监视诸如用户18等的一个或多个用户从而可以捕捉、分析并跟踪一个或多个用户所执行的姿势和/或移动，来执行应用程序中的一个或多个控制命令或动作和/或动画化化身或屏幕上人物，如将在下面更详细地描述的。