[发明专利]人机交互系统及方法

说明书

技术领域

本发明涉及人机交互技术领域，更具体地说，涉及一种人机交互系统及方法。

背景技术

随着科技的进步，在许多公共和非公共的场所（如：教育、会议、展会、工业生产、平板电脑、手机等）随处可见基于手势识别的人机交互设备（如：触摸屏、书写板、电子白板等）的应用，这类人机交互设备为各行各业提供了更加稳定、方便、直观和自然的交互方式。

目前，基于手势识别的人机交互设备实现交互的方法如图1所示，主要包括：

步骤S11：将人机交互设备通过USB（Universal Serial Bus，通用串行总线）接口与主机相连，为人机交互设备上电，使人机交互设备的MCU（Micro Control Unit，微控制单元）内的触摸屏程序运行；

步骤S12：检测手势操作；

步骤S13：判断是否检测到手势操作，如果是，进入步骤S14，如果否，返回步骤S12；

步骤S14：将检测到的手势操作通过人机交互设备的USB接口发送给主机；

步骤S15：主机接收到人机交互设备发送的手势操作后，根据手势操作进行对应的处理。

基于手势识别的人机交互设备在使用时常常会有进行各种手势操作的需求，这就需要用户自己使用人机交互设备开发应用程序（如：开发实现多点触摸的应用程序），而用户自己开发应用程序又需要具有一定的开发能力，能够编写USB接口的程序，或者需要学习厂商提供的SDK（Software Development Kit，软件开发工具包）程序，使用SDK程序进行开发。

但是，上述两种开发方法本身都较复杂，并且，由于系统兼容性的影响，在不同的操作系统下，需要重新进行应用程序的开发，这些都造成设备的开发应用复杂，用户使用的门槛和难度加大。

发明内容

本发明提供了一种人机交互系统及方法，以简化人机交互设备的开发应用，降低用户使用的难度。

为实现上述目的，本发明提供了如下技术方案：

本发明提供了一种人机交互系统，包括：人机交互设备和通过所述人机交互设备的USB接口与所述人机交互设备相连的主机；

其中，所述人机交互设备包括：映射表存储单元、初始化管理单元、映射表读取单元、临时存储单元、手势操作检测单元和键盘消息获取单元；所述映射表存储单元存储有手势操作到键盘消息的映射表，所述手势操作到键盘消息的映射表中的每一个手势操作均唯一对应一条键盘消息；所述初始化管理单元用于初始化所述人机交互设备，为所述人机交互设备的USB接口配置HID协议，并在所述人机交互设备的USB描述符中添加键盘设备的描述符；所述映射表读取单元用于从所述映射表存储单元中读取所述手势操作到键盘消息的映射表，并将所述手势操作到键盘消息的映射表发送给所述临时存储单元；所述临时存储单元用于接收所述映射表读取单元发送的手势操作到键盘消息的映射表，并临时存储所述手势操作到键盘消息的映射表；所述手势操作检测单元用于检测用户的手势操作，并将检测到的手势操作的信息发送给所述键盘消息获取单元；所述键盘消息获取单元用于接收所述手势操作检测单元发送的手势操作的信息，根据所述手势操作的信息从所述临时存储单元临时存储的手势操作到键盘消息的映射表中获取所述手势操作对应的键盘消息，并将所述键盘消息通过所述人机交互设备的USB接口发送给所述主机；

所述主机包括：键盘消息查询单元和手势操作处理单元；所述键盘消息查询单元用于在所述主机内查询所述键盘消息获取单元发送的键盘消息，并将查询到的键盘消息发送给所述手势操作处理单元；所述手势操作处理单元用于接收所述键盘消息查询单元发送的键盘消息，并根据所述键盘消息进行对应的手势操作的处理。

优选的，所述手势操作检测单元包括：检测结果生成单元和检测结果判断单元；所述检测结果生成单元用于检测用户的手势操作，生成检测结果，并将所述检测结果发送给所述检测结果判断单元；所述检测结果判断单元用于接收所述检测结果生成单元发送的检测结果，根据所述检测结果判断是否检测到手势操作，如果是，则将检测到的手势操作的信息发送给所述键盘消息获取单元，如果否，则触发所述检测结果生成单元继续检测用户的手势操作。