[发明专利]一种手语识别转换系统

摘要

本发明公开了一种手语识别转换系统，包括用户终端，所述用户终端设有信息存储模块、手语采集模块、文字输入模块、语音输入模块、图像处理模块、翻译模块、语音处理模块、显示模块、语音输出模块、控制模块和无线传输模块。本发明方便将手语信息转换为中文文字信息、外文文字信息、中文语音信息或者外文语音信息输出，同时也可以将中文文字信息、外文文字信息、中文语音信息或者外文语音信息转换为手语信息输出，方便聋哑人士与普通人之间的交流；还可以通过无线传输模块将一个用户终端与另一个用户终端联系起来，方便聋哑人士和普通人进行远程交流。

主权项

一种手语识别转换系统，其特征是：包括用户终端(1)，所述用户终端(1)设有信息存储模块(2)、手语采集模块(3)、文字输入模块(4)、语音输入模块(5)、图像处理模块(6)、翻译模块(7)、语音处理模块(8)、显示模块(9)、语音输出模块(10)、控制模块(11)和无线传输模块(12)；所述信息存储模块(2)：用于存储标准手语的动态模型、与标准手语的动态模型对应的中文文字信息、与中文文字信息对应的中文语音信息、与中文文字信息对应的外文文字信息、与外文文字信息对应的外文语音信息；所述手语采集模块(3)：用于采集人体影像，并将采集的人体影像传输入图像处理模块(6)；所述文字输入模块(4)：用于输入中文文字信息、外文文字信息，并根据控制模块(11)的指令信息将中文文字信息传输至图像处理模块(6)，将外文文字信息传输至翻译模块(7)；所述语音输入模块(5)：用于采集中文语音信息、外文语音信息，并根据控制模块(11)的指令信息将中文语音信息、外文语音信息传输至语音处理模块(8)；所述图像处理模块(6)：根据手语采集模块(3)输入的人体影像抽取出用于识别手语信息的人体特征影像，并对人体特征影像进行图像分割，分割出脸部的特征以及手臂和手部的运动轨迹，提取出手语特征，根据提取的手语特征与信息存储模块(2)存储的信息进行识别比较，得到对应的中文文字信息，并根据控制模块(11)的指令信息将此中文文字信息传输至显示模块(9)、语音处理模块(8)或者翻译模块(7)；图像处理模块(6)接收文字输入模块(4)传输的中文文字信息、翻译模块(7)传输的中文文字信息、语音处理模块(8)传输的中文文字信息，并将接收的此中文文字信息与信息存储模块(2)存储的信息进行比较，得到手语动态模型，将手语动态模型传输至显示模块(9)；所述翻译模块(7)：将传输至翻译模块(7)的中文文字信息翻译成外文文字信息，并根据控制模块(11)的指令信息将此外文文字信息传输至显示模块(9)或者语音处理模块(8)；将传输至翻译模块(7)的外文文字信息翻译成中文文字信息，并根据控制模块(11)的指令信息将中文文字信息传输至显示模块(9)或者语音处理模块(8)或者图像处理模块(6)；所述语音处理模块(8)：接收图像处理模块(6)传输的中文文字信息并将接收的中文文字信息转换为中文语音信息，同时将此中文语音信息传输至语音输出模块(10)；接收翻译模块(7)传输的外文文字信息并将接收的外文文字信息转换为外文语音信息，同时将此外文语音信息传输至语音输出模块(10)；接收语音输入模块(5)传输的中文语音信息和外文语音信息，同时将接收的中文语音信息转换为中文文字信息，并将此中文文字信息传输至图像处理模块(6)，将外文语音信息转换为外文文字信息并将转换的外文文字信息传输至翻译模块(7)；所述显示模块(9)：包括显示屏，根据图像处理模块(6)传输的手语动态模型输出手语动态影像；根据图像处理模块(6)传输的中文文字信息输出中文文字信息；根据语音处理模块(8)传输的中文文字信息输出中文文字信息；根据翻译模块(7)输出的外文文字信息输出外文文字信息；所述语音输出模块(10)：根据语音处理模块(8)传输的中文语音信息输出中文语音信息，根据语音处理模块(8)传输的外文语音信息输出外文语音信息；所述控制模块(11)：用于设置指令信息并发出指令信息，指令信息包括手语转换为中文文字指令、手语转换为中文语音指令、手语转换为外文文字指令、手语转换为外文语音指令、中文文字转换为手语的指令、中文语音转换为手语的指令、外文文字转换为手语的指令、外文语音转换为手语的信息指令；所述无线传输模块(12)：与显示模块(9)、语音输出模块(10)连接，所述用户终端(1)之间通过无线传输模块(12)进行中文文字信息、外文文字信息、中文语音信息、外文语音信息和手语动态影像的传递。