[发明专利]实现通用硬件-软件接口的方法、设备和计算机可读介质

权利要求书

1.一种由一个或多个计算装置执行的用于实现通用硬件-软件接口的方法，所述方法包括：

在所述一个或多个计算装置中的至少一个上执行的虚拟驱动程序至少部分地基于通信地联接到所述一个或多个计算装置中的至少一个的一个或多个硬件装置捕获的信息来确定用户输入；

所述一个或多个计算装置中的至少一个识别与所述用户输入对应的场景，其中识别的场景包括操作系统或在所述操作系统上执行的应用中的一个；

所述一个或多个计算装置中的至少一个至少部分地基于所述识别的场景将所述用户输入转换为一个或多个透明层命令，其中所述透明层包括被配置为接口连接在所述虚拟驱动程序与所述操作系统或者在所述操作系统上执行的所述应用中的一个或多个之间的应用编程接口(API)；以及

所述一个或多个计算装置中的至少一个在所述透明层上执行所述一个或多个透明层命令，其中所述一个或多个透明层命令的执行被配置为导致在所述识别的场景中执行一个或多个本机命令。

2.根据权利要求1所述的方法，其中所述一个或多个硬件装置捕获的信息包括一个或多个图像，并且其中至少部分地基于通信地联接到所述一个或多个计算装置中的至少一个的一个或多个硬件装置捕获的信息来确定用户输入包括：

识别所述一个或多个图像中的目标；

确定所述一个或多个图像中的识别目标的一个或多个方向和一个或多个位置；以及

至少部分地基于所述识别目标的一个或多个方向和一个或多个位置来确定所述用户输入。

3.根据权利要求2所述的方法，其中至少部分地基于所述识别目标的一个或多个方向和一个或多个位置来确定所述用户输入包括：

至少部分地基于所述一个或多个方向和所述一个或多个位置来确定所述透明层的透明用户界面(UI)上的位置坐标，所述透明UI叠加在与所述操作系统或在所述操作系统上执行的所述应用中的一个或多个对应的底层UI上。

4.根据权利要求3所述的方法，其中，至少部分地基于所述识别的场景将所述用户输入转换为所述一个或多个透明层命令包括：

至少部分地基于所述位置坐标和所述识别的场景来确定所述透明层命令，其中所述透明层命令包括所述识别的场景中的至少一个本机命令，所述至少一个本机命令被配置为在所述底层UI中的对应位置坐标处执行动作。

5.根据权利要求4所述的方法，其中，所述至少一个本机命令包括以下中的一个或多个：

选择命令，被配置为选择和所述底层UI中的所述对应位置坐标相关联的目标；或

指针命令，被配置为将指针移动到所述底层UI中的所述对应位置坐标。

6.根据权利要求4所述的方法，其中所述至少一个本机命令包括图形命令，被配置为更改所述底层UI中的所述对应位置坐标处的显示输出，并且进一步包括：

所述一个或多个计算装置中的至少一个将更改的显示输出导出为图像。

7.根据权利要求2所述的方法，其中至少部分地基于所述识别目标的一个或多个方向和一个或多个位置来确定所述用户输入包括：

至少部分地基于所述一个或多个方向和所述一个或多个位置来识别手势。

8.根据权利要求7所述的方法，其中至少部分地基于所述识别的场景将所述用户输入转换为所述一个或多个透明层命令包括：

至少部分地基于识别的手势和所述识别的场景来确定透明层命令，其中所述透明层命令包括所述识别的场景中的至少一个本机命令，所述至少一个本机命令被配置在所述识别的场景中执行与所述识别的手势相关联的动作。

9.根据权利要求1所述的方法，其中所述一个或多个硬件装置捕获的所述信息包括声音信息，并且其中至少部分地基于通信地联接到所述一个或多个计算装置中的至少一个的一个或多个硬件装置捕获的信息来确定所述用户输入包括：

对所述声音信息执行语音识别以识别一个或多个词。