[发明专利]将用户运动转换成多个对象响应

说明书

技术领域

本发明涉及将用户运动转换成多个对象响应的方法和系统。

背景技术

过去，诸如计算机游戏和多媒体应用等计算应用使用控制器、遥控器、键盘、鼠标等来允许用户操纵游戏角色。近来，计算机游戏和多媒体应用已开始使用照相机和软件姿势识别来提供人机接口(“HCI”)。使用HCI，用户姿势形式的用户交互被检测、解释和使用来控制游戏角色。

发明内容

公开了一种技术，它通过允许用户与传统上为非交互式的和静态的各种屏幕上对象进行交互，来增强与应用进行的用户交互。例如，可使用用户运动来改变、控制或移动除用户的屏幕上表示以外的对象。捕捉与要和应用进行交互的用户意图有关的用户运动，并将该用户运动转换成屏幕上对象的多个对象响应。屏幕上对象的多个对象响应为与应用进行交互的用户提供了增强的和改进的用户体验，而不会改变用户对应用进行的典型的或其他方式的被动交互的结果。

在一个实施例中，提供了一种基于与在计算设备上执行的应用所进行的用户交互来将用户运动转换成屏幕上对象的多个对象响应的方法。从捕捉设备接收来自一个或多个用户的用户运动数据。该用户运动数据对应于与应用中呈现的屏幕上对象所进行的用户交互。该屏幕上对象对应于除由计算设备显示的用户的屏幕上表示以外的对象。将用户运动数据自动转换成屏幕上对象的多个对象响应。将屏幕上对象的多个对象响应同时显示给用户。

提供本概述以便以简化的形式介绍将在以下详细描述中进一步描述的一些概念。本发明内容并不旨在标识出所要求保护的主题的关键特征或必要特征，也不旨在用于帮助确定所要求保护的主题的范围。此外，所要求保护的主题不限于解决在本公开的任何部分中提及的任何或所有缺点的各实现。

附图说明

图1示出了用户正在玩游戏的跟踪系统的一个实施例。

图2示出了可用作跟踪系统的一部分的捕捉设备的一个实施例。

图3示出了可用来跟踪运动并基于所跟踪的运动来更新应用的计算设备的一个实施例。

图4示出了可用来跟踪运动并基于所跟踪的运动来更新应用的计算设备的一个实施例。

图5是描述了用于执行本公开技术中的各操作的过程的一个实施例的流程图。

图6是描述了根据本公开技术的用于捕捉用户运动数据的过程的一个实施例的流程图。

图7示出了表示所扫描的人类目标的骨架模型或映射的示例。

图8提供了图2中示出的姿势识别引擎的示例性实施例的进一步细节。

图9是描述了根据本公开技术的用于确定用户运动数据是否匹配一姿势的过程的一个实施例的流程图。

图10-14示出了根据本公开技术的描绘了与计算设备上执行的应用所进行的用户交互的各种用户界面屏幕。

具体实施方式

公开了一种技术，通过该技术与在计算设备上执行的应用所进行的用户交互得到了增强，从而使得用户能够与不是用户的屏幕上表示的屏幕上对象进行交互。捕捉设备捕捉涉及与应用进行交互的用户意图的用户运动数据。计算设备连接至所述捕捉设备，并从所述捕捉设备接收与用户运动数据有关的信息，以控制应用的各个方面。应用可以包括例如在所述计算设备上执行的视频游戏应用或电影应用。一个或多个用户经由计算设备中的用户界面来与由该应用描绘的屏幕上对象进行交互。在一个实施例中，屏幕上对象对应于例如非传统的玩游戏元素，诸如在非交互式或静态体验(诸如例如由应用呈现的静态电影序列、故事序列、影片序列或动画)期间显示的有生命的对象或者无生命的对象。

在一个实施例中，计算设备将用户运动数据转换成屏幕上对象的多个对象响应。用户运动数据可从与应用交互的一个或多个用户处接收。屏幕上对象的多个对象响应可包括屏幕上对象的运动响应、音频响应或视觉响应。可以经由计算设备中的用户界面来将对象响应同时显示给用户。

图1示出了用于执行本公开技术的各操作的目标识别、分析和跟踪系统10的一个实施例(下文中通常称为跟踪系统)。目标识别、分析和跟踪系统10可用来识别、分析和/或跟踪诸如用户18等的人类目标。如图1所示，跟踪系统10可包括计算设备12。计算设备12可以是计算机、游戏系统或控制台等等。根据一个实施例，计算设备12可以包括硬件组件和/或软件组件，从而使得计算设备12可用来执行诸如游戏应用、非游戏应用之类的应用。在一个实施例中，计算设备12可包括可执行在处理器可读存储设备上存储的、用于执行在此描述的过程的指令的处理器，诸如标准化处理器、专用处理器、微处理器等。