[发明专利]基于手势识别产生交互式虚拟用户界面的方法及相关装置

权利要求书

1.一种基于手势识别产生交互式虚拟用户界面的方法，用于互动系统，其特征在于，该方法包含有：

在复数个影像中侦测具有两只手的影像；

当侦测到有两只手的影像时，识别两只手的手势；

当一只手识别为指向手势且另一只手识别为打开手势时，投影虚拟用户界面物件至该打开手势的手上；

追踪该指向手势的手的指尖，用来取得该指尖与该打开手势的手之间的相对位置；

判断该指尖与该打开手势的手之间的该相对位置是否符合预设规则；以及

当该指尖与该打开手势的手之间的该相对位置符合该预设规则时，将该指向手势的手的指尖的动作视为点击命令。

2.根据权利要求1所述的方法，其特征在于，该预设规则包含预设角度或预设距离。

3.根据权利要求1所述的方法，其特征在于，还包含有：

判断该打开手势的手为固定物件；以及

当该打开手势的手移动时，停止投影虚拟用户界面物件。

4.根据权利要求1所述的方法，其特征在于，还包含有：

判断该打开手势的手是否在预设角度，或是否在指向手势的手的一侧；

当判断该打开手势的手在该预设角度或在该指向手势的手的一侧时，判断该打开手势的手为固定物件；

其中，投影该虚拟用户界面物件至该打开手势的手上的步骤包含有当一只手识别为该指向手势且另一只手识别为该打开手势时，投影该虚拟用户界面物件至对应该固定物件的位置上。

5.根据权利要求1所述的方法，其特征在于，在复数个影像中侦测具有两只手的该影像的步骤包含有：

在操作距离中，撷取该复数个影像中的一影像的深度像素；

通过随机决策森林运算将该影像中的所有像素分类为可能的左手群组和右手群组；

将围绕在被检验像素的深度背景作为该随机决策森林运算的输入参考，并输出被检验像素的可能群组；

将该左/右手群组匹配到影像子帧中的连接物件；

计算左/右手的轮廓半径；

裁剪左/右手轮廓；以及

根据该左/右手轮廓，撷取左/右手的深度数据。

6.根据权利要求5所述的方法，其特征在于，当侦测到有两只手的该影像时，识别两只手的手势的步骤包含有：

撷取手的影像子帧；

通过该随机决策森林运算，将该影像子帧中的像素分类为复数个手势群组；以及

将包含最多像素的一手势群组设置为手势结果；以及

将包含次多像素的另一手势群组设置为手势参考结果。

7.根据权利要求1所述的方法，其特征在于，还包括以下步骤：

根据点击命令，产生虚拟用户界面物件中对应相对位置的字符物件的影像数据。

8.一种头戴式显示器，用来根据手势识别产生交互式虚拟用户界面，其特征在于，该头戴式显示器包含有：

影像传感器；

处理单元，用来执行程序码；

存储单元，耦接于该处理单元及该影像传感器，用来存储该程序码，其中该程序码指示该处理单元执行以下步骤：

在复数个影像中侦测具有两只手的影像，其中该影像是由该影像传感器所撷取；

当侦测到有两只手的影像时，识别两只手的手势；

当一只手识别为指向手势且另一只手识别为打开手势时，投影虚拟用户界面物件至该打开手势的手上；

追踪该指向手势的手的指尖，用来取得该指尖与该打开手势的手之间的相对位置；

判断该指尖与该打开手势的手之间的该相对位置是否符合预设规则；以及

当该指尖与该打开手势的手之间的该相对位置符合该预设规则时，将该指向手势的手的指尖的动作视为点击命令。

9.根据权利要求8所述的头戴式显示器，其特征在于，该预设规则包含预设角度或预设距离。