[发明专利]视频流中的对象建模和替换

权利要求书

1.一种用于视频流中的对象建模和替换的方法，包括：

由一个或多个处理器接收来自图像采集装置的描绘手的至少一部分的一个或多个图像；

在所述一个或多个图像中采样像素以确定所述像素的一个或多个颜色值；

基于所采样的像素的所述一个或多个颜色值确定所述手的颜色简档，所述颜色简档表示所述手的中间颜色值，其中在颜色阈值内的颜色值被包括在所述颜色简档内，所述颜色简档通过生成在所述图像采集装置的视场的预定部分内所采样的像素的直方图来确定，所述直方图被分为表示来自所采样的像素的颜色值中的相应的颜色值的多个直方图区间；

确定在所述一个或多个图像内与所述视场的所述预定部分中的所述手的所述部分对应的像素，所述手的所述部分具有手指，其中，确定具有高于像素阈值的像素数量的直方图区间中的像素与所述手的所述部分相关联，以及确定具有低于像素阈值的像素数量的直方图区间中的像素与所述手的所述部分不相关；

基于与所述手的所述部分对应的所述像素，识别所述手指的手指位置；

基于所述手指位置确定所述手指的方向；

基于所述手指的所述方向，通过修改所述像素阈值和/或所述颜色阈值来动态地修改直方图阈值；以及

采用与所述手指的所述方向对准的图形界面元素替换所述手的所述部分和所述手指。

2.根据权利要求1所述的方法，其中，识别所述手指位置进一步包括：

形成包围所述手的所述部分的至少一部分的凸多边形；以及

识别所述凸多边形内的一个或多个缺陷，缺陷指示位于所述手的所述部分上的两个手指之间的空间。

3.根据权利要求1所述的方法，其中，确定所述手指的所述方向进一步包括：

识别所述手指的尖端，所述尖端表示所述手指的第一点；

识别所述手指上的第二点，所述第二点沿所述手指与所述第一点间隔开；

生成在所述第一点和所述第二点之间延伸的方向线；以及

确定所述一个或多个图像内的所述方向线的方向。

4.根据权利要求3所述的方法，其中，采样所述一个或多个颜色值进一步包括：

选择所述视场的所述部分内的第一像素；

确定所述第一像素包括预定的颜色值范围内的第一颜色值；

选择所述视场的所述部分内的第二像素，所述第二像素与所述第一像素间隔开并位于所述视场的所述部分内；

确定所述第二像素包括所述预定的颜色值范围内的第二颜色值；

比较所述第一颜色值和所述第二颜色值，以确定所述第二颜色值在所述第一颜色值的预定阈值内；以及

将所述第一颜色值和所述第二颜色值包括在用于所述手的所述颜色简档中。

5.根据权利要求3所述的方法，其中，确定所述颜色简档进一步包括：

去除所述直方图中与低于预定像素阈值的像素数量相关联的一个或多个区间；以及

将所述直方图中与高于所述预定像素阈值的像素数量相关联的一个或多个区间包括在所述颜色简档内。

6.根据权利要求1所述的方法，进一步包括：

通过将与所述手的所述部分对应的所述像素转换为第一值并且将所述视场内的剩余像素转换为第二值，通过隔离与所述手的所述部分对应的所述像素，来生成一个或多个二值图像。

7.根据权利要求1所述的方法，其中，确定所述手指的所述方向进一步包括：

确定用于所述一个或多个图像的一组先前帧的每个帧的所述手指的方向；以及

将用于所述组先前帧的所述手指的所述方向组合，以识别所述手指的聚合方向。

8.根据权利要求1所述的方法，其中，确定所述手指的所述方向进一步包括：

从所述视场的指定角确定所述手指的当前方向；

识别用于所述一个或多个图像的所述手指的组合方向，以指示先前的组合方向；

确定所述当前方向与所述先前的组合方向之间的位置上的变化超过位置阈值；以及

基于位置上的所述变化超过所述位置阈值，从一组第一方向识别操作和一组第二方向识别操作中选择。