[发明专利]用图像投影的虚拟交互

权利要求书

1.一种用于在虚拟环境中提供低等待时间交互的接口系统，所述接口系统包括：

由计算设备的处理器执行的接口程序，所述接口程序被配置成：

接收用户手部的背面的初始图像以及表示所述手部的初始实际位置的对应的初始深度信息；

使用所述初始深度信息，将所述初始图像投影到所述虚拟环境中的初始虚拟位置，所述初始虚拟位置对应于所述初始实际位置；

向显示设备提供所述初始图像的分割版本以供显示在所述虚拟环境中的所述初始虚拟位置；

接收所述用户手部的背面的后续图像以及表示与所述初始实际位置不同的所述手部的后续实际位置的对应的后续深度信息；

使用所述后续深度信息，将所述后续图像投影到所述虚拟环境中的后续虚拟位置，所述后续虚拟位置对应于所述后续实际位置；

向所述显示设备提供所述后续图像的分割版本以供显示在所述虚拟环境中的所述后续虚拟位置；以及

检测所述手部的三维表示与所述虚拟环境中的虚拟对象或物理对象之间的触碰。

2.如权利要求1所述的接口系统，其特征在于，所述接口程序被配置成将所述初始图像的分割版本和所述后续图像的分割版本提供给所述显示设备以供以其中所述手部在所述虚拟环境中大致向上伸展的虚拟定向显示，而不管所述用户手部的所述初始实际位置和所述后续实际位置。

3.如权利要求1所述的接口系统，其特征在于，所述接口程序被进一步配置成从具有捕捉所述用户手部的背面的视野的捕捉设备接收所述用户手部的背面的初始图像。

4.如权利要求3所述的接口系统，其特征在于：

所述初始实际位置与所述捕捉设备隔开初始实际距离，且所述后续实际位置与所述捕捉设备隔开不同于所述初始实际距离的后续实际距离；并且

所述初始虚拟位置与所述虚拟对象或所述物理对象隔开虚拟距离，且所述后续虚拟位置与所述虚拟对象或所述物理对象隔开所述虚拟距离。

5.如权利要求3所述的接口系统，其特征在于，所述捕捉设备位于头戴式显示设备上。

6.一种用于在虚拟环境中提供低等待时间交互的方法，所述方法包括：

接收用户手部的背面的初始图像以及表示所述手部的初始实际位置的对应的初始深度信息；

使用所述初始深度信息，将所述初始图像投影到所述虚拟环境中的初始虚拟位置，所述初始虚拟位置对应于所述初始实际位置；

向显示设备提供所述初始图像的分割版本以供显示在所述虚拟环境中的所述初始虚拟位置；

接收所述用户手部的背面的后续图像以及表示与所述初始实际位置不同的所述手部的后续实际位置的对应的后续深度信息；

使用所述后续深度信息，将所述后续图像投影到所述虚拟环境中的后续虚拟位置，所述后续虚拟位置对应于所述后续实际位置；

向所述显示设备提供所述后续图像的分割版本以供显示在所述虚拟环境中的所述后续虚拟位置；以及

检测所述手部的三维表示与所述虚拟环境中的虚拟对象或物理对象之间的触碰。

7.如权利要求6所述的方法，其特征在于，进一步包括在检测到所述触碰之际向所述显示设备提供触碰感官提示。

8.如权利要求6所述的方法，其特征在于，进一步包括向所述显示设备提供对应于所述用户手部在所述虚拟环境中的虚拟位置的位置感官提示。

9.如权利要求6所述的方法，其特征在于，进一步包括在检测到所述用户手部的虚拟位置在所述虚拟对象或所述物理对象的预定邻近度内之际向所述显示设备提供位置感官提示。

10.如权利要求6所述的方法，其特征在于，进一步包括：

接收与所述用户手部的背面的后续图像的重新映射的虚拟位置有关的用户输入；

基于所述用户输入，将所述后续图像投影到所述虚拟环境中的所述重新映射的虚拟位置；以及

向所述显示设备提供所述后续图像的分割版本以供显示在所述虚拟环境中的所述重新映射的虚拟位置。