[发明专利]使用标记区域对视频流的手势预处理

说明书

公开了用于通过采用阶梯状的及分布式管线步骤而对视频流进行处理以降低平台功率的技术，其中，选择性地执行CPU密集型处理。所述技术特别适用于基于手部的导航手势处理。在一个示例性事例中，例如，所述技术在计算机系统中实现，其中初始阈值检测(图像扰动)以及选择性地用户存在(手部图像)处理组件接近所述系统的相机或在所述相机内，并且所述相机位于系统的主显示器内或者接近所述显示器。在一些事例中，处于标记区域外的多在个处理阶段之间的图像处理及像素信息传输被抑制。在一些实施例中，所述标记区域与鼠标垫或指定的桌面区或用户输入设备(例如，键盘)对齐。由系统所评估的像素可被限制在所述标记区域的子集中。

本申请为分案申请，其原申请是于2015年5月13日(国际申请日为2013年12月10日)向中国专利局提交的专利申请，申请号为201380059289.8，发明名称为“使用标记区域对视频流的手势预处理”。

相关申请

本申请是2012年12月13日提交的、名称为“Gesture Pre-Processing of Videostream to Reduce Platform Power”的美国专利申请No.13/713849的连续部分。此外，本申请与2013年3月13日提交的、名称为“Gesture Pre-Processing of Video Stream UsingSkintone Detection”的美国专利申请No.13/801111有关。这些申请中的每一个均通过引用整体并入本文。

背景技术

对于终端用户，大多数的计算机用途是将所述终端用户连接到因特网，这是通过浏览接口进行的。常见用途及活动包括例如基于搜索引擎的浏览、电子邮件(email)、社交网络、内容消费(例如，浏览新闻及视频)、内容分享(例如，照片、音乐等)、在线购物和采买、以及地图和定向等等。这些常见的因特网用途通常需要某种形式的基于用户的导航，例如通常使用鼠标或触摸板及关键词完成。

为了改善用户导航体验，已经产生了基于手势的导航技术。特别地，用户手的移动可通过所谓的网络摄影机记录下来并转换成指针的移动。典型的基于手势的导航应用结合网络摄影机进行操作，其能够模仿通常使用常规的鼠标或触摸板来执行的动作：点击、双击、拖拽及滚动。用户也可利用头部的移动来控制计算机或以其它方式实施导航。存在两种用于使用相机实现人体手势的基本方法：使用具有所谓的标记的物体的手势(其中，标记被设置在与相机传感器交互的视野内)，以及无标记手势(例如，无标记的手部手势)。无标记手势技术可使用三维或3D相机(具有Z深度)来实现，这通常用于观察约3至5米(m)范围的距离，或使用二维或2D相机(根据2D信息而解释3D运动)实现，这通常用于观察约0.5米(m)范围的距离。

诸如台式计算机或工作站、膝上型计算机或平板计算机、或游戏机等的计算环境中的图形处理通常需要大量复杂的操作。这些操作包括例如关于确保图像被适当并及时地被渲染以及关于手势识别的操作。在这些操作的情况下出现很多重要的问题。

附图说明

图1a用图形示出了根据本文所披露的技术的实施例的，用于执行对视频流的手势预处理以降低平台功耗的阶梯状的分布式流程。

图1b示出了根据实施例的图1a中的阶梯状的分布式流程的流程图。

图2a示出了根据本文所披露的技术的实施例的，被配置为用于执行对视频流的阶梯状的分布式手势预处理以降低平台功耗的系统的框图。

图2b示出了根据实施例的来自图2a所示系统的不同阶段的控制和数据流。

图2c示出了根据本文所披露的技术的实施例的，在给定特定的计算系统设置的情况下针对每个流程的典型CPU利用率，并由此表明通过使用对视频流的阶梯状的分布式手势预处理可具有的改善潜力。

图2d示出了根据本文所披露的技术的实施例的，用于肤色阈值检测以降低平台功耗的示例性方法。