[发明专利]一种儿童功能性构音音韵异常的AI辅助矫正方法在审
申请号: | 202011211135.4 | 申请日: | 2020-11-03 |
公开(公告)号: | CN112168147A | 公开(公告)日: | 2021-01-05 |
发明(设计)人: | 裴亚 | 申请(专利权)人: | 华中科技大学同济医学院附属协和医院 |
主分类号: | A61B5/00 | 分类号: | A61B5/00;G16H80/00 |
代理公司: | 武汉信合红谷知识产权代理事务所(特殊普通合伙) 42264 | 代理人: | 解波 |
地址: | 430022 湖北*** | 国省代码: | 湖北;42 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 儿童 功能 性构音 音韵 异常 ai 辅助 矫正 方法 | ||
1.一种儿童功能性构音音韵异常的AI辅助矫正方法,其特征在于:包括以下步骤:
S1、选择若干名发音正常的治疗师分别预录矫正教程中的语句,录制时采用动作捕捉技术采集治疗师在发音过程中面部、口腔和胸腔的运动模式并分别建立3D运动模型;
S2、利用AI分析软件分析S1中获取的若干份3D运动模型样本,筛除因个人体型及发音习惯造成的差异化点并将其抹消后进行模型合成,构建标准化动作模型;
S3、将S1中获取的若干份录音样本进行AI分析后选取最为标准的语音语调构建发音标准,通过人声合成的方式构建标准发音音频;
S4、将S2中获得的标准化动作模型和S3中获得的标准发音音频依照时间轴同步后进行合成后再以单句为间隔点进行分割,构建标准化的辅助矫正模板,然后再由治疗师根据辅助矫正模板逐句讲解每个音发音时的胸腔、口腔、舌部和喉部在发声时的动作指导,随后将构建完成的辅助矫正模板录入作为系统处理交互终端中的存储装置中;
S5、进行矫正工作时,患者在系统处理交互终端上按照自身课程进度选择对应的课程,系统处理交互终端从存储装置中释放对应课程的辅助矫正模板并按照时间轴逐句通过音频输出装置进行输出;
S6、音频输出后患者进行跟读,跟读的同时系统处理交互终端上的收音装置和摄像装置同时获取患者的发音和跟读时面部、口腔和胸腔的运动状态并与辅助矫正模板中的标准化动作模型及标准发音音频进行校对,判断二者之间是否相符,若不相符则执行S7,若相符则执行S10;
S7、当患者的发音和跟读时面部、口腔和胸腔的运动状态并与辅助矫正模板中的标准化动作模型及标准发音音频不符合时,系统处理交互终端驱动音频输出装置重新输出上一句语音并由患者再次进行跟读并判断与辅助矫正模板是否相符,若不相符则执行S8,若相符则执行S10;
S8、若S7中再次跟读时患者的发音和跟读时面部、口腔和胸腔的运动状态并与辅助矫正模板中的标准化动作模型及标准发音音频依旧不符合,则再次重新输出上一句语音,语音输出完成后通过音频输出装置输出与这句语音对应的发声时的动作指导,患者根据动作指导再次跟读并判断与辅助矫正模板是否相符,若不相符则执行S9,若相符则执行S10;
S9、若还是不相符,则系统处理交互终端会通知可用的治疗师对患者进行当面辅导,直到患者的发音与辅助矫正模板相符;
S10、当患者的发音与辅助矫正模板相符后,系统处理交互终端从存储装置中释放对应下一语句的辅助矫正模板并通过音频输出装置进行输出。
2.根据权利要求1所述的一种儿童功能性构音音韵异常的AI辅助矫正方法,其特征在于:S1中动作捕捉采集时采集点包括嘴唇、面颊、喉部、颈部、肩部及胸腔处肺部位置。
3.根据权利要求1所述的一种儿童功能性构音音韵异常的AI辅助矫正方法,其特征在于:所述摄像装置包括动作捕捉装置。
4.根据权利要求3所述的一种儿童功能性构音音韵异常的AI辅助矫正方法,其特征在于:S6~9中采用动作捕捉装置捕捉患者在发音时的动作状态后生产临时3D动作模型并与辅助矫正模板中的标准化动作模型进行对比。
5.根据权利要求1所述的一种儿童功能性构音音韵异常的AI辅助矫正方法,其特征在于:S6~10中患者跟读的发音及发声动作录音录像留档,当单元课程完成后将所有单句的录音录像汇总并发送给指定的治疗师,进行人工复核以确保矫正课程的执行效果。
6.根据权利要求1所述的一种儿童功能性构音音韵异常的AI辅助矫正方法,其特征在于:所述系统处理交互终端可以通过网络连接个人PC终端。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于华中科技大学同济医学院附属协和医院,未经华中科技大学同济医学院附属协和医院许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202011211135.4/1.html,转载请声明来源钻瓜专利网。
- 上一篇:一种三排柱组合式结构回转支承
- 下一篇:并行训练业务模型的方法及装置