[发明专利]一种基于Sikuli图像识别的手机游戏体感操控系统及方法

权利要求书

1.一种基于sikuli图形识别的手机游戏体感操控系统，其特征在于，所述操控系统包括：

游戏界面图像处理单元，用于基于Sikuli的图像识别技术自动识别当前游戏场景图像，获取所述当前游戏场景图像的当前控件信息并发送给游戏体感控制单元；

体感动作输入单元，用于基于体感设备识别当前用户操作动作图像，获取所述当前用户操作动作图像的骨骼点骨架信息并发送给游戏体感控制单元；

游戏体感控制单元，用于接收所述游戏界面图像处理单元发送的所述当前控件信息与所述体感动作输入单元发送的骨骼点骨架信息，对所述骨骼点骨架信息进行解析获取相对于的当前动作ID信息，基于所述当前控件信息与所述当前动作ID信息分析计算出相应的当前虚拟输入动作信息并发送给游戏执行单元；

游戏执行单元，用于接收所述游戏体感控制单元发送的当前虚拟输入动作信息并根据所述当前虚拟输入动作信息来执行游戏体感操作。

2.如权利要求1所述的手机游戏体感操控系统，其特征在于，所述游戏界面图像处理单元包括图像获取子单元、图像标识子单元、控件信息生成子单元，所述图像获取子单元通过截图工具截取能代表当前游戏场景并能区别其他游戏场景的当前游戏图像，所述图像标记子单元对所述当前游戏图像设置相应的ID标识信息，所述控件信息生成子单元基于所述ID标识信息生成所述当前游戏场景中相应的当前控件信息。

3.如权利要求1所述的手机游戏体感操控系统，其特征在于，所述游戏体感控制单元包括预设数据子单元、动作ID解析子单元、数据分析子单元、虚拟信息生成子单元，所述预设数据子单元预先存储各游戏场景中相应的游戏控件信息、动作ID信息与虚拟输入动作信息之间的映射关系，所述动作ID解析子单元对所述骨骼点骨架信息进行解析获取相应的当前动作ID信息，所述数据分析子单元对所述当前控件信息与所述当前动作ID信息进行分析，并基于预先存储的所述映射关系计算出对应的当前虚拟输入动作信息，所述虚拟信息生成子单元生成并输出所述当前虚拟输入动作信息。

4.如权利要求4所述的手机游戏体感操控系统，其特征在于，所述游戏体感控制单元包括重置子单元，所述重置子单元对所述预设数据子单元预先存储的所述游戏控件信息、动作ID信息与虚拟输入动作信息之间的映射关系进行重置。

5.如权利要求1所述的手机游戏体感操控系统，其特征在于，所述体感设备包括体感摄像头、红外激光扫描仪。

6.一种基于sikuli图形识别的手机游戏体感操控方法，其特征在于，所述体感操控方法包括：

S10、基于Sikuli的图像识别技术自动识别当前游戏场景图像，获取所述当前游戏场景图像的当前控件信息并发送；

S20、基于体感设备识别当前用户操作动作图像，获取所述当前用户操作动作图像的骨骼点骨架信息并发送；

S30、接收所述当前控件信息与所述骨骼点骨架信息，对所述骨骼点骨架信息进行解析获取相应的当前动作ID信息，基于所述当前控件信息与所述当前动作ID信息分析计算出相应的当前虚拟输入动作信息，生成所述当前虚拟输入动作信息并发送；

S40、接收所述当前虚拟输入动作信息并根据所述当前虚拟输入动作信息来执行游戏体感操作。

7.如权利要求6所述的手机游戏体感操控方法，其特征在于，所述步骤S10还包括：通过截图工具截取能代表当前游戏场景并能区别其他游戏场景的当前游戏图像，对所述当前游戏图像设置相应的ID标识信息，基于所述ID标识信息生成所述当前游戏场景中相应的当前控件信息。

8.如权利要求7所述的手机游戏体感操控方法，其特征在于，所述步骤S10还包括：利用当前游戏场景与其它游戏场景的图像特点来区分，所述图像特点包括多个参照位置的RGB特征，所述参照位置是指能区别于所述当前游戏场景的其它游戏场景。