[发明专利]一种基于面部与语音识别的游戏控制系统及方法

说明书

技术领域

本发明属于网络游戏开发技术领域，涉及到一种基于面部与语音识别的游戏控制系统及方法。

背景技术

随着移动网络正逐渐的在人们的生活和工作普及，从而智能手机的发展也越来越迅速，手机的用途主要是打电话和上网，为了丰富人们的生活，进而手机上的软件功能也逐渐丰富。

手机上的游戏是最常见的一款软件，手机游戏用户规模增长较快，为互联网产业注入新的活力，手机上的游戏成为人们最常见的一种娱乐方式，越来越多的人们在空闲的时间玩游戏，例如在等公交、做公交、排队、吃饭等场景下玩手机游戏，但是由于目前手机游戏需要人们通过手动进行操作，使得人们需要长时间的盯住手机屏幕，对人眼造成很大的伤害，同时人们在路上玩游戏易发生危险，严重影响人们的安全，同时由于手机屏幕较小，存在操作不便的问题。

发明内容

本发明的目的在于提供一种基于面部与语音识别的游戏控制系统及方法，解决了目前游戏玩家对玩游戏的环境场所有限制，以及操作不便的问题。

本发明的目的可以通过以下技术方案实现：

一种基于面部与语音识别的游戏控制系统，包括视觉采集模块、视觉识别模块、视觉对比模块、语音采集模块、语音识别模块、语音对比模块、数据库、数据处理模块、游戏控制模块、多媒体展示模块和语音播放模块；

所述视觉采集模块用于对游戏玩家的表情进行采集，并将采集的表情发送至视觉识别模块；

所述视觉识别模块用于将视觉采集模块发送的表情信息转化成视觉数字信号，并将视觉数字信号发送至视觉对比模块；

所述视觉对比模块用于对接收的视觉数字信号与数据库中存储的视觉数字信号进行对比；

所述语音采集模块用于采集游戏玩家的语音，并将采集的语音信息发送至语音识别模块；

所述语音识别模块用于将语音采集模块发送的语音信息转化成语音数字信号，并将语音数字信号发送至语音对比模块；

所述语音对比模块用于对接收的语音数字信号与数据库中存储的语音数字信号进行比较；

所述数据库用于存储视觉数字信号和语音数字信息；

所述数据处理模块用于对视觉对比模块和语音对比模块发送的数字信号进行处理，转化成计算机识别的文本指令信息，并将文本信息发送至游戏控制模块；

所述游戏控制模块接收数据处理模块发送的文本信息，根据文本信息对多媒体展示模块和语音播放模块进行控制；

所述多媒体展示模块用于展示游戏中人物的动作；

所述语音播放模块用于对游戏中的语音信息进行播放。

进一步地，所述视觉采集模块为摄像头，用于采集游戏玩家的表情，游戏中人物的表情与游戏玩家的表情相一致。

进一步地，所述语音采集模块用于采集游戏玩家的语音信息，采集的用于对游戏中人物的动作及语言进行控制。

一种基于面部与语音识别的游戏控制方法，包括以下步骤：

S1、视觉采集模块采集游戏玩家的表情信息，同时语音采集模块，采集游戏玩家关键的语音信息；

S2、视觉识别模块将视觉采集模块采集的视觉信息转化成视觉数字信号，转化的视觉数字信号发送至视觉对比模块，语音识别模块将语音采集模块采集的语音信息转化成语音数字信号，转化的语音数字信号发送至语音对比模块；

S3、若视觉对比模块接收的视觉数字信号与数据库中存储的数字信号相匹配，则视觉对比模块将对比的结果及识别的视觉识别信号发送至数据处理模块，若不匹配，则视觉对比模块只发送对比失败的结果至数据处理模块；

S4、若语音对比模块对关键的语音信息转化的语音数字信号与数据库中存储的语音数字信号相匹配，则语音对比模块将对比的结果及识别的语音识别信号发送至数据处理模块，若匹配不成功，则语音对比模块只发送匹配失败的结果至数据处理模块；

S5、数据处理模块对匹配成功的视觉识别信号和语音识别信号进行处理，转化成计算机识别的文本指令信息，并将文本指令信息发送至游戏控制模块，数据处理模块对匹配失败的视觉识别信号和语音识别信号不进行处理；

S6、游戏控制模块根据文本指令信息对游戏中的多媒体展示模块和语音播放模块进行控制。

进一步地，游戏玩家运行游戏程序时，系统自动发送是否开启摄像头以及麦克风的提示指令至游戏玩家。

本发明的有益效果：