[发明专利]人机交互方法、装置、头戴显示设备及存储介质

说明书

本申请公开了人机交互方法、装置、头戴显示设备及存储介质，人机交互方法包括：在头戴显示设备中增设虚拟的USB HID设备；通过USB HID设备接收移动终端中Android应用发送的UI交互操作所作用的坐标数据；将UI交互操作所作用的坐标数据上报给所述移动终端，模拟触发交互事件，以使得所述移动终端响应于所述交互事件，执行相应的交互操作。本申请实施例避开了Android系统的权限限制，在没有获取Android系统权限的情况下，实现通过头戴显示设备与Android终端用户界面的交互功能。

技术领域

本申请涉及头戴显示设备技术领域，尤其涉及人机交互方法、装置、头戴显示设备及存储介质。

背景技术

随着手机硬件能力的不断增强，越来越多的手机开始支持输出视频信号，使得轻量化的VR(Virtual Reality，虚拟现实)/AR(Augmented Reality，增强现实)头戴显示设备成为可能。但是安卓Android系统在权限管理方面日趋严格，这导致VR/AR等头戴显示设备在连接手机使用的场景下，未取得Android系统的INJECT_EVENT权限，不能进行按键注入等进而无法实现点击，确认等常规操作，严重影响了用户体验。

发明内容

本申请实施例提供了人机交互方法、装置、头戴显示设备及存储介质，以避开Android系统的权限限制，在不获取Android系统权限的情况下，实现了头戴显示设备与移动终端用户界面交互的功能。

本申请实施例采用下述技术方案：

第一方面，本申请实施例提供一种人机交互方法，所述人机交互方法包括：

在头戴显示设备中增设虚拟的USB HID设备；

通过USB HID设备接收移动终端中Android应用发送的UI交互操作所作用的坐标数据；

将UI交互操作所作用的坐标数据上报给所述移动终端，模拟触发交互事件，以使得所述移动终端响应于所述交互事件，执行相应的交互操作。

第二方面，本申请实施例还提供一种人机交互装置，所述人机交互装置包括：

虚拟模块，用于在头戴显示设备中增设虚拟的USB HID设备；

交互模块，用于通过USB HID设备接收移动终端中Android应用发送的UI交互操作所作用的坐标数据，将UI交互操作所作用的坐标数据上报给所述移动终端，模拟触发交互事件，以使得所述移动终端响应于所述交互事件，执行相应的交互操作。

第三方面，本申请实施例还提供一种头戴显示设备，包括：处理器；以及被安排成存储计算机可执行指令的存储器，所述可执行指令在被执行时使所述处理器执行本申请实施例第一方面所述方法。

第四方面，本申请实施例还提供一种计算机可读存储介质，所述计算机可读存储介质存储一个或多个程序，所述一个或多个程序当被包括多个应用程序的头戴显示设备执行时，使得所述头戴显示设备执行本申请实施例第一方面所述方法。

本申请实施例采用的上述至少一个技术方案能够达到以下有益效果：对于Android移动终端不开放系统权限的场景，本申请实施例通过在头戴显示设备中增设虚拟的USB HID设备，利用USB HID设备模拟交互事件上报，从而实现点击，选择等交互事件的触发。由此，避开了Android移动终端的权限限制，在没有获取到系统权限的情况下，仍然能够完成头戴显示设备的用户交互功能，具有通用性，并且减轻了头戴显示设备对Android系统的权限依赖，改善了头戴显示设备的用户体验。

附图说明

此处所说明的附图用来提供对本申请的进一步理解，构成本申请的一部分，本申请的示意性实施例及其说明用于解释本申请，并不构成对本申请的不当限定。在附图中：

图1为本申请实施例的人机交互方法的流程图；