[发明专利]一种口肌训练结合的多模态言语康复训练系统

权利要求书

1.一种口肌训练结合的多模态言语康复训练系统，包括人机交互设备，其特征在于：所述人机交互设备包括有数据采集单元(1)、数据分析单元(2)、数据对照单元(3)、显示单元(4)和数据库(5)，所述数据采集单元(1)与数据分析单元(2)电性连接，所述数据分析单元(2)与数据对照单元(3)电性连接，所述数据对照单元(3)与显示单元(4)和数据库(5)连接。

2.根据权利要求1所述的一种口肌训练结合的多模态言语康复训练系统，其特征在于：所述显示单元(4)包括设置于人机交互设备表面的显示屏和操作键盘，所述显示单元(4)用于练习内容、练习动作和练习得分，所述人机交互设备上设置有USB接口。

3.根据权利要求1所述的一种口肌训练结合的多模态言语康复训练系统，其特征在于：所述数据采集单元(1)包括有声音采集模块(6)、图像采集模块(7)和气体感受模块(8)，所述声音采集模块(6)为嵌入设置在人机交互设备上的拾音器，所述图像采集模块(7)为设置在人机交互设备上端的摄像头，所述气体感受模块(8)为设置在人机交互设备前端的气压传感器。

4.根据权利要求1所述的一种口肌训练结合的多模态言语康复训练系统，其特征在于：所述数据分析单元(2)用于将采集的数据进行整理和分析，分析结果传输给数据对照单元(3)。

5.根据权利要求1所述的一种口肌训练结合的多模态言语康复训练系统，其特征在于：所述数据对照单元(3)包括语音对照模块(9)、图像对照模块(10)和气压对照模块(11)。

6.根据权利要求5所述的一种口肌训练结合的多模态言语康复训练系统，其特征在于：所述语音对照模块(9)用于将声音采集模块(6)采集的音频与数据库(5)中标准音频进行对比，根据重合率得出训练分数；所述图像对照模块(10)用于将图像采集模块(7)采集的口型图像与数据库(5)中标准口型图像进行对比，并根据重合率得出训练分数；所述气压对照模块(11)用于将气体感受模块(8)采集的气息规律与数据库(5)中标准气息规律进行对比，并根据重合率得出训练分数。

7.根据权利要求1-6任意一项所述的一种口肌训练结合的多模态言语康复训练系统的使用方法，其特征在于：包括以下步骤，

步骤一：将训练素材导入数据库(5)中，数据库(5)中包括简单、复杂、困难三种程度难易训练；

步骤二：用户在人机交互设备的显示屏上选择训练时的难易程度，并根据交互界面的显示引导，进行发音训练，发音训练时利用数据采集单元(1)对用户的音频、图像和呼出气压信息进行采集；

步骤三：数据采集单元(1)将采集的数据信息传递给数据分析单元(2)，数据分析单元(2)对采集的音频、图像和气压数据进行分析，并将分析结果传输给数据对照单元(3)，数据对照单元(3)将用户的训练信息与数据库(5)中的标准发音信息进行对比，并根据用户训练信息与标准发音信息的重合率得出综合得分；

步骤四：若综合得分低于50分，用户进行针对性口肌训练内容；

步骤五：用户根据人机交互设备上显示屏的引导进行针对性口肌训练，并由数据采集单元(1)记录针对性口肌训练过程；

步骤六：针对性口肌训练完成后进行二次发音，数据对照单元(3)对发音训练信息与标准发音信息进行对比打分，直至发音训练得分超过50分结束训练。

8.根据权利要求7所述的一种口肌训练结合的多模态言语康复训练系统的使用方法，其特征在于：所述步骤一中听障儿童进行言语训练的素材包含声母、韵母、单个音节、词组音节及音调。

9.根据权利要求7所述的一种口肌训练结合的多模态言语康复训练系统的使用方法，其特征在于：所述步骤四中针对性口肌训练包括发音口型、发音音标和气体训练，根据步骤三中第一次发音训练的每项得分选择得分较少的项目进行训练。