[发明专利]一种手语识别翻译系统及其识别方法

摘要

本发明提供一种手语识别翻译系统及其识别方法，涉及手势识别领域。该系统包括数据采集处理模块、识别模块和验证模块；该方法包括：采集物理信号搭建并训练出分类模型和验证模型；对采集到的信号数据进行预处理得到时序信号；设置手语识别的窗口长度和步长以及置信度阈值；截取与手语识别窗口相同长度的时序信号分别输入至识别模块和验证模块获得识别结果和验证结果；计算信号数据验证结果的置信度；忽略错误识别结果，输出正确识别结果，然后继续识别下一段时序信号。本方法利用深度学习的算法对处理后的数据进行模式识别并进行验证，实现对手语多元分类，准确、完整的识别，大大的拓展了能够识别的手语数目，并且极大的增强了手语的识别效果。

主权项

1.一种手语识别翻译系统，其特征在于，包括数据采集处理模块、识别模块和验证模块；所述数据采集处理模块，用于以固定频率对表面肌电信号、加速度信号和陀螺仪信号进行采集，并对采集到的信号数据进行预处理，包括分割、特征提取和数据标准化；所述识别模块，用于根据采集到的信号数据采用深度学习方法搭建、训练出基于卷积神经网络VGG‑NET的分类模型，并通过训练好的分类模型对处理后的信号数据进行分类，完成手语识别工作；所述验证模块，用于根据采集到的手语数据采用深度学习的方法搭建、训练出基于连续的卷积层的验证模型，并通过训练好的验证模型对处理后的信号数据进行再分类，再综合识别模块的结果计算属于识别结果的置信度，最后根据置信度判断手语识别是否成功。