[发明专利]一种基于单目手势控制的桌面交互系统

权利要求书

1.一种基于单目手势控制的桌面交互系统，其特征在于：所述系统包括中控模块、手势检测模块、数据传输模块和反馈模块；所述交互系统整体嵌入桌面或独立外设；

所述中控模块分别与所述手势检测模块、数据传输模块和反馈模块相连接，用于控制其他各模块的运行；所述手势检测模块采用单目摄像头检测用户手势图像，所述中控模块对检测到的用户手势图像进行处理分析，得到手势命令，并将手势命令通过数据传输模块发送至受控设备或后台从而控制受控设备或后台执行所述手势命令对应的功能，所述中控模块还用于从受控设备或后台获取运行结果，所述运行结果通过反馈模块向用户提供反馈；

所述中控模块对检测到的用户手势图像进行处理分析，得到手势命令，并将手势命令通过数据传输模块发送至受控设备或后台，具体为：通过单目摄像头检测用户手势图像，从检测到的用户手势图像中提取基于用户手形和姿态的静态手势，结合前序提取结果提取基于时序特征变化的动态手势，根据预设对应关系，将提取的手势结果转换为对应的手势命令并输出至受控设备或后台。

2.根据权利要求1所述的系统，其特征在于：利用卷积神经网络进行静态手势提取，所述卷积神经网络层数不多于8层。

3.根据权利要求2所述的系统，其特征在于：所述动态手势提取在静态手势提取基础上进行，所述交互系统存储着一段时间内提取到的静态手势序列，当提取到新的静态手势时，将当前提取结果与前序静态手势进行对比，提取该段时间内的位置变化、形态变化及姿态变化，从而得到动态手势。

4.根据权利要求3所述的系统，其特征在于：所述动态手势还包括用户自定义手势，用户能够将交互系统支持的静态手势自行组合，录制符合自身操作习惯的动态手势，所述录制流程具体如下：

步骤1、用户在操作区内做出自定义动态手势，交互系统通过单目摄像头进行录制；

步骤2、用户通过交互系统对录制的视频进行二次截取，保留有效部分；

步骤3、交互系统对截取后视频进行检测及分析；

步骤4、输出并存储新的动态手势。

5.根据权利要求1所述的系统，其特征在于：所述反馈模块用于向用户实时提供操作反馈，反馈模式包括视觉、声音及震动中的一种或多种。