[发明专利]一种基于深度图像的手掌跟踪方法和系统

权利要求书

1.一种基于深度图像的手掌跟踪方法，其特征在于，所述方法包括：

将包含手势的多个深度图像中的第一深度图像转换为3D点云并获得预估手掌心点；

以所述预估手掌心点作为初始点在测地线距离阈值范围内进行区域生长并获得手掌连通集；

获取所述手掌连通集的边界点集合；

确定所述手掌连通集中每个点到所述手掌连通集范围之外的逆区域生长种子点的测地线距离；根据所述测地线距离和所述边界点集合确定跟踪点；及基于所述跟踪点跟踪手掌。

2.根据权利要求1所述的方法，其特征在于，所述方法在以所述预估手掌心点作为初始点在测地线距离阈值范围内进行区域生长之前还包括对所述预估手掌心点进行矫正，所述矫正包括：

对以所述预估手掌心点为圆心的半径为r的球内的所有点取加权平均得到加权平均点，其中r为70-150mm；

在所述3D点云的空间中找出一个距离加权平均点最近的点作为矫正后的预估手掌心点；

其中所述以所述预估手掌心点作为初始点在测地线距离阈值范围内进行区域生长并获得手掌连通集包括：以所述矫正后的预估手掌心点作为初始点在测地线距离阈值范围内进行区域生长并获得手掌连通集。

3.根据权利要求2所述的方法，其特征在于，所述方法在获取所述手掌连通集的边界点集合之前还包括：响应于所述手掌连通集的点数少于预设连通集点数第一阈值，以矫正后的预估手掌心点的邻域作为新的初始点重新进行区域生长并获得新的手掌连通集；

其中所述获取所述手掌连通集的边界点集合包括：获取所述新的手掌连通集的边界点集合。

4.根据权利要求1所述的方法，其特征在于，所述逆区域生长种子点按照下述方式确定：

以区域生长最后停止生长的方向为指向手臂的方向，在指向手臂的方向上选取在测地线距离第二阈值范围内的多个点并求出所述多个点中的至少两个点的中值以得到所述逆区域生长种子点。

5.根据权利要求1所述的方法，其特征在于，获取所述手掌连通集的边界点集合的步骤包括：

对所述手掌连通集内的每个点进行是否为边界点的判断从而得到所述边界点集合，其中在一点的四邻域均属于所述手掌连通集时确定其不是边界点；及其中在一点的四邻域的邻域之一不属于所述手掌连通集时确定其为边界点。

6.根据权利要求1所述的方法，其特征在于，所述根据所述测地线距离和所述边界点集合确定跟踪点包括：

根据所述手掌连通集中每个点到所述逆区域生长种子点的测地线距离设定每个点的权重，测地线距离越大，权重越高；

以所述手掌连通集的非边界点为中心，将到所述非边界点的测地线距离小于r的边界点加入备选非边界点集合，然后找出备选非边界点集合中权重最大的一个非边界点；

对以所述权重最大的一个非边界点为圆心的半径为r的球内的所有点取加权平均得到跟踪点，其中r为70-150mm。

7.根据权利要求1所述的方法，其特征在于，所述根据所述测地线距离和所述边界点集合确定跟踪点包括：

根据所述手掌连通集中每个点到所述逆区域生长种子点的测地线距离设定每个点的权重，测地线距离越大，权重越高；

以所述手掌连通集的非边界点为中心，将到所述非边界点的测地线距离小于r的边界点加入备选非边界点集合，然后找出备选非边界点集合中权重最大的多个非边界点，其中r为70-150mm；

对权重最大的多个非边界点中的每一非边界点，分别对以其为圆心的半径为r的球内的所有点取加权平均，得到多个手掌中心候选点；

对多个手掌中心候选点进行加权平均得到跟踪点。

8.根据权利要求1所述的方法，其特征在于，所述基于所述跟踪点跟踪手掌包括：

判断手掌跟踪是否跟踪丢失；及

在确定手掌跟踪丢失时删除当前跟踪对象。