[发明专利]穿透型头部穿戴式显示系统与互动操作方法

权利要求书

1.一种互动操作方法，适用于一穿透型头部穿戴式显示系统，其中该穿透型头部穿戴式显示系统穿戴于一使用者上，并且具有一摄影装置以及一显示装置，该摄影装置连续拍摄一空间以产生多个图像帧，对于每一图像帧，该互动操作方法包括：

进行一图像分析，以获得该空间中的一标志的一定位信息以及于该空间中该使用者所使用的一输入装置的一输入装置三维信息；

根据该定位信息，确认该显示装置所欲显示一画面的一画面尺寸与一画面位置以及该画面的一虚拟图像的一虚拟图像位置；

根据该输入装置三维信息以及该使用者的一眼睛位置，进行一图像遮蔽处理，以计算出该画面中相对应该输入装置的一遮蔽区块，并于显示该画面时，对遮蔽区块内的部分该画面进行一图像处理；

根据该定位信息以及该输入装置三维信息，确认该输入装置是否触碰该虚拟图像；以及

当确认该输入装置触碰该虚拟图像时，根据该输入装置触碰该虚拟图像的一接触位置，执行该接触位置所对应该画面上的一特定位置所代表的一事件。

2.如权利要求1所述的互动操作方法，其特征在于，还包括侦测该空间中的该标志以启动该互动操作方法，进行后续对每一图像帧执行的该互动操作方法。

3.如权利要求1所述的互动操作方法，其特征在于，还包括进行一校正程序，以取得该摄影装置、该使用者的该眼睛位置与该显示装置的相对位置关系。

4.如权利要求1所述的互动操作方法，其特征在于，该图像遮蔽处理包括：

根据该眼睛位置以及该输入装置三维信息，计算分别连接该使用者的一眼睛与该输入装置的一轮廓的多个连结线延长至与该虚拟图像交会的多个交点；

分析该些交点，以获得该输入装置于该虚拟图像上的一虚拟遮蔽区块；

根据该虚拟遮蔽区块，计算该显示装置所欲显示该画面中相对应该虚拟遮蔽区块的该遮蔽区块；

对该遮蔽区块内的部分该画面进行该图像处理；以及

于该显示装置上显示已经过图像处理的该遮蔽区块内的部分该画面的该画面。

5.如权利要求1所述的互动操作方法，其特征在于，该穿透型头部穿戴式显示系统还包含一存储装置，且对于每一该些图像帧进行该图像分析以获得该输入装置的该输入装置三维信息的步骤包括：

进行一轮廓侦测，以取得该输入装置的一轮廓信息；

根据该轮廓信息以及该存储装置中是否记录有该图像帧的一前图像帧中该输入装置的一输入点的一搜寻视窗权值与一搜寻视窗位置信息，进行一权值运算，以确认该输入装置的该输入点的一输入点二维座标；以及

根据该轮廓信息以及该输入点二维座标，进行一深度计算，以获得该输入装置的一轮廓三维信息以及该输入点的一输入点三维信息组成的该输入装置三维信息。

6.如权利要求5所述的互动操作方法，其特征在于，确认该输入装置的该输入点的该二维座标的方法，包括：

根据该轮廓信息，确认一轮廓凸出点作为一第一候选点；以及

当该存储装置中未记录该图像帧的一前图像帧中该输入装置的该输入点的一搜寻视窗权值与一搜寻视窗信息，则以该第一候选点作为该输入装置的该输入点，并以该输入点为该搜寻视窗的一中心，开启该搜寻视窗，并以一预设权值作为该搜寻视窗的该搜寻视窗权值，且于该存储装置中记录该图像帧所对应的该搜寻视窗的该搜寻视窗权值以及记录对应该中心的该搜寻视窗位置信息为该输入点的该二维座标。

7.如权利要求6所述的互动操作方法，其特征在于，还包括：

当该存储装置中记录该图像帧的该前图像帧中该输入装置的该输入点的该搜寻视窗权值与该搜寻视窗位置信息，且该第一候选点位于该搜寻视窗位置信息对应的该搜寻视窗中时，则以该第一候选点为该输入点，以该第一候选点为该搜寻视窗的该中心，更新该搜寻视窗的该搜寻视窗位置信息，并增加该搜寻视窗权值直到一预设上限权值门槛值，且于该存储装置中记录该图像帧所对应的增加后的该搜寻视窗权值以及记录更新后的该搜寻视窗位置信息为该输入点的该二维座标。