[发明专利]智能化发音矫正方法及系统在审
申请号: | 202110956597.7 | 申请日: | 2021-08-19 |
公开(公告)号: | CN113658584A | 公开(公告)日: | 2021-11-16 |
发明(设计)人: | 王晓怡;张宝月;马珠江 | 申请(专利权)人: | 北京智精灵科技有限公司 |
主分类号: | G10L15/02 | 分类号: | G10L15/02;G10L15/18;G10L15/25;G10L15/26;G10L25/63 |
代理公司: | 北京法信智言知识产权代理事务所(特殊普通合伙) 11737 | 代理人: | 尹超群 |
地址: | 100193 北京市海淀区东北旺北京*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 智能化 发音 矫正 方法 系统 | ||
1.一种智能化发音矫正系统,其特征在于,所述系统包括数据采集模块、数据处理模块以及反馈模块,其中,
所述数据采集模块包括声音采集模块、唇形采集模块、口腔采集模块,其中,
所述声音采集模块用于采集患者的音色、音调、语义内容,
所述唇形采集模块用于采集患者发音时唇部的形状,
所述口腔采集模块用于采集用户的声音、气流、口腔内压、舌位、口形相关数据;
所述数据处理模块包括语音处理模块、图像识别模块、和舌位感应模块,其中,
所述语音处理模块将所述声音采集模块采集到的音调、音色、语义信息与系统内置的标准模型进行自然语言处理技术下的对比分析,对输入信息进行正误判断反馈,
所述图像识别模块将采集到的唇形信息与正确发音唇形作对比,判断患者发音正确与否,
所述舌位感应模块实现电腭图数据自动化处理,并实时反馈舌腭接触情况图像以及数据处理结果;
所述反馈模块包括语音反馈模块、唇形反馈模块和口腔反馈模块。
2.根据权利要求1所述的智能化发音矫正系统,其特征在于,所述声音采集模块包括话筒,所述唇形采集模块包括摄像头,所述口腔采集模块包括电腭图、电腭图特定的硬腭模具。
3.根据权利要求1所述的智能化发音矫正系统,其特征在于,所述图像识别模块通过摄像头识别唇形。
4.根据权利要求1所述的智能化发音矫正系统,其特征在于,所述语音处理模块包括预处理模块、特征提取模块、声学模型、语言模型及字典模块、解码模块,其中,
所述预处理模块对所采集到的声音信号进行音频数据预处理,从原始信号中提取需要分析的音频信号;
所述特征提取模块将声音信号从时域转换到频域,为声学模型提供合适的特征向量;
所述声学模型根据声学特性计算每一个特征向量在声学特征上的得分;
所述语言模根据语言学相关的理论,计算该声音信号对应可能的音节、字、词组或语句序列的概率;
所述解码模块根据已有的字典对词组序列进行解码,得到最后的用户反馈的文本信息。
5.根据权利要求4所述的智能化发音矫正系统,其特征在于,所述系统还包括文本分析模块,通过所述文本分析模块分析所得的文本信息,对语音处理过程输出的文本信息进行理解和处理,分析完成后,将获取到的结果与标准文本进行对比,获得用户在当前评估或训练任务上的结果,并将结果呈现于反馈模块。
6.一种智能化发音矫正方法,其特征在于,所述方法包括构音障碍测评过程和训练过程,其中,
所述构音障碍测评过程包括以下步骤:
S1-1:获取用户账户信息;
S1-2:取测试任务目标;
S1-3:获取用户唇形、声音、气流、口腔内压、舌位信息;
S1-4:处理采集到的用户声音、唇形、口腔信息,与内置标准模型进行对比;
S1-5:判断用户信息是否与标准模型相匹配,其中,
如果匹配则进入下一题,当前音节连续正确次数≥3时,进入下一音节测试,如果不匹配则当前音节错误次数加一,同时进入下一题,当前音节错误次数≥3时,这一音节计入训练登记;
S1-6:完成所有音节测试,呈现报告,
所述训练过程包括以下步骤:
S2-1:获取用户账户信息;
S2-2:提示用户进行训练前放松练习;
S2-3:提示用户进行构音器官训练,播放训练教程,使用户练习呼吸、感受发音器官,增强口部肌肉力量;
S2-4:连接唇形和舌位信息采集的外接设备;
S2-5:提示用户进行系统推荐的每日语音训练;
S2-6:呈现反馈,通过屏幕及提示语音反馈发音正确与否,若正确,则进入下一题,若错误,则提示正确发音、舌位、唇形模型图供用户参考;
S2-7:每日训练任务全部完成,则提醒用户结束训练。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京智精灵科技有限公司,未经北京智精灵科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202110956597.7/1.html,转载请声明来源钻瓜专利网。
- 上一篇:用于空中成像的二面角反射器阵列结构
- 下一篇:车辆行为检测方法、装置及系统