[发明专利]基于手势识别的辅助语义识别方法

权利要求书

1.基于手势识别的辅助语义识别方法，其特征在于，包括如下步骤：

S0、信息采集步骤，采集用户的个人资料信息，个人资料信息包括姓名和残疾类型，残疾类型包括听力和言语；

S1、手势演示步骤：在输入前播放手势演示视频；

S2、图像采集步骤：实时采集图像数据；

S3、图像处理步骤：对图像数据进行预处理并划分手势识别区；

S4、手势识别步骤：识别手势识别区的手势并记录手势的运动轨迹信息；将手势及手势的运动轨迹信息输入预设的手势识别模型中并获取识别结果；识别结果为文字文本；

S500、基于用户的个人资料判断用户是否为听力残疾；

S501、基于运动轨迹信息判断运动速度是否超过第一阈值；还基于运动轨迹信息判断运动幅度是否低于第二阈值，

S502、如果超过第一阈值，播放手势速度过快提醒；如果低于第二阈值，还播放手势幅度过小提醒；

S503、播放手势速度过快提醒后，继续基于运动轨迹信息判断运动速度是否超过第一阈值；

S504、如果超过第一阈值，播放速度引导文件；速度引导文件为速度引导音乐或速度引导视频；如果是听力残疾，播放速度引导视频；如果不是听力残疾，播放速度引导音乐；

S505，播放手势幅度过小提醒后，继续基于运动轨迹信息判断运动幅度是否低于第二阈值；

S506、如果低于第二阈值，播放幅度引导文件；幅度引导文件为幅度引导音乐或幅度引导视频；如果是听力残疾，播放幅度引导视频；如果不是听力残疾，播放幅度引导音乐；幅度引导音乐的音量与运动幅度成反比，幅度引导视频的亮度与运动幅度成反比；

S6、语义识别步骤：获取文字文本并提取咨询关键词，将咨询关键词与预存的法律词库中的法律关键词进匹配，并获取匹配成功的法律关键词对应的法律条文；将法律条文输出。

2.根据权利要求1所述的基于手势识别的辅助语义识别方法，其特征在于：所述S0包括如下子步骤：

S001、采集残疾证图像；

S002、识别残疾证图像中的文字；

S003、从已识别的文字中提取个人资料信息。