[发明专利]屏上对象的手动操纵

说明书

相关申请交叉引用

本申请是非临时申请，要求2012年3月1日提出的临时申请61/605414的优先权，由此该临时申请明确通过引用结合于本文中。

背景技术

这一般涉及在计算机显示器上图像的控制。

 一般情况下，计算机显示器上图像的操纵通过使用鼠标以移动光标图像或者通过使用鼠标光标选择并移动各种对象来完成。此方案的一个缺陷是用户必须具有鼠标。另一缺陷是用户必须使用鼠标操纵对象。更多功能性操纵杆也可以类似方式使用，但所有这些技术具有共同的特性，那就是用户必须操纵物理对象以便操纵在显示屏幕上发生的情况。

附图说明

一些实施例相对于以下图进行描述：

图1是根据一个实施例，开始抓握对象的用户手势的图示；

图2是根据本发明的一个实施例，完成对象的抓握的用户手势的图示；

图3是根据一个实施例，开始移动对象的用户手势的图示；

图4是根据一个实施例，完成对象的移动的用户手势的图示；

图5是根据一个实施例，开始对象的旋转的用户手势的图示；

图6是根据一个实施例，在完成手势后完成对象的移动的用户手势的图示；

图7是根据一个实施例，在手势开始时开始调整对象大小的用户手势的图示；

图8是根据一个实施例，在手势结束时完成对象的大小调整的用户手势的图示；

图9是根据一个实施例，指示屏幕位置的用户手势的图示；

图10是根据本发明的一个实施例，开始改变显见相机方位的用户手势的图示；

图11是根据一个实施例，执行虚拟相机的摇动的用户手势的图示；

图12是根据一个实施例，根据摇动命令的用户手势的图示；

图13是根据本发明的一个实施例的显示屏幕的图示，其中，根据一个实施例，移动手形光标以抓握对象；

图14是根据一个实施例，在手形光标已移到与对象连接的某个方位后对应于图13的图示；

图15是根据一个实施例，在手形光标实际上已移动和旋转对象后的屏幕显示；

图16是根据本发明的一个实施例，用于局部手势控制的流程图；

图17是根据一个实施例，用于允许改变虚拟相机取向的系统的流程图；以及

图18是本发明一个实施例的示意图。

具体实施方式

根据一些实施例，手势可完全用于控制在显示屏幕上对象的表观动作。在本文中使用时，“只”使用手势表示用户的手无需抓握物理对象以便提供手势命令。在本文中使用时，术语“手形光标”指能够变成显现接合或抓握显示屏幕上示出对象的可移式手类图像。相反，普通箭头光标不能接合显示屏幕上的对象。

在一些实施例中，三维空中手势可用于操纵三维的示出对象。

在一些实施例中，手形光标可只使用手势移动以便与显示屏幕示出对象交互。随后，可只使用手势以多种方式移动那些示出对象。

参照图1，用户显示在要抓握对象的方位。在此方位中，手形光标可已经移动以便在视觉上与对象交互。随后，在用户如图2所示合上用户的手时，手形光标如同抓握一样物理上接合屏幕上的示出对象。

在一些实施例中，光标也可采用其它形状。例如，举几个示例而言，它可以是手的受操纵几何模型、传统光标或发光球。

显示屏幕与基于处理器的装置相关联。该装置耦合到诸如摄像机等记录用户的运动的图像捕捉装置。随后，在该装置上执行的视频分析应用可分析视频。该分析可包括手姿、运动或方位的识别。姿势指由在联结处的角度定义的手配置。运动指通过空间的平移。方位指空间中的位置。随后，可匹配识别的手方位和与特定命令联系而存储的手方位。一个或更多个相机对用户的动作进行成像，并且将该用户动作协调到适当方位手形光标的图示。在一些实施例中，手形光标具有显现以对应于手抓握对象的方式移动的手指。

具体而言，如图13所示，可促使手形光标H在箭头A1所示方向上移动以接合条形对象O。这可通过只使用手势来完成。如图14所示，一旦手形光标与对象O相关联，则手形光标以逆时针方向旋转的移动产生了如图15所示对象O的旋转。手形对象的旋转可以是用户借助于由适当相机捕捉的手势，提供旋转命令的结果。

在一个实施例中，手形光标对象可改变形状。例如，“手指”可张开以接合对象并且随后闭合以抓握对象。

虽然示出了简单的旋转运动，但实际上能够只使用手势以相同方式命令在二维或三维空间中任何类型的运动。