[发明专利]一种发音纠正系统、方法、介质和计算设备

权利要求书

1.一种发音纠正系统，其特征在于，包括：

测试模块，被配置为输出基于用户学习数据确定的测试内容；采集用户根据所述测试内容输入的第一测试数据，其中所述第一测试数据包括面部图像数据和语音数据；

发音纠正模块，被配置为从所述第一测试数据中提取用户发音特征并匹配对应的发音纠正策略；基于所述发音纠正策略向用户反馈发音纠正内容，所述发音纠正内容用于指示发音差异类型以及对应的发音纠正策略。

2.如权利要求1所述的系统，其特征在于，所述测试模块还用于：

在所述发音纠正模块基于所述发音纠正策略向用户反馈发音纠正内容之后，采集用户根据所述发音纠正内容输入的第二测试数据，其中所述第二测试数据包括面部图像数据和语音数据；

基于所述第二测试数据和预设的练习策略得到练习结果。

3.如权利要求1或2所述的系统，其特征在于，所述测试模块还用于：

在采集所述第一测试数据或第二测试数据之前，判断图像采集设备是否识别出用户面部区域；

所述测试模块在采集所述第一测试数据或第二测试数据时，具体用于：

若判定所述图像采集设备识别出所述用户面部区域，则向用户输出测试开启指令；和/或，

触发所述图像采集设备启动对所述用户面部区域进行图像数据采集，以得到所述面部图像数据，其中所述面部图像数据包含有用户基于所述测试内容或发音纠正内容产生的面部动作对应的图像数据。

4.如权利要求3所述的系统，其特征在于，所述测试模块还用于：

在判断图像采集设备是否识别出用户面部区域之后，若判定所述图像采集设备未识别出所述用户面部区域，则输出识别结果；和/或，

通过调整指令向用户指示对所述用户面部区域与所述图像采集设备之间的相对位置进行调整。

5.如权利要求2至4任一所述的系统，其特征在于，所述面部图像数据包括口型数据和/或面部关键点数据。

6.如权利要求1所述的系统，其特征在于，所述用户发音特征包括发音图像特征；

所述发音纠正模块在从所述第一测试数据中提取用户发音特征并匹配对应的发音纠正策略时，具体用于：

从所述面部图像数据对应的至少一个图像帧中提取所述发音图像特征，所述发音图像特征包括对应于预设音标的用户发音口型特征；

对比所述对应于预设音标的用户发音口型特征与该预设音标对应的标准口型特征并匹配对应的口型差异类型；

将所述口型差异类型对应的口型差异纠正策略设置为所述发音纠正策略。

7.如权利要求6所述的系统，其特征在于，所述发音纠正内容包括发音纠正图像；

所述发音纠正模块在基于所述发音纠正策略向用户推送发音纠正内容时，具体用于:

基于所述口型差异纠正策略以及从所述面部图像数据中提取的用户面部特征，模拟出该用户对预设音标进行正确发音时的口型图像作为口型纠正引导图像；

以模拟出的所述口型纠正引导图像作为发音纠正内容向用户推送。

8.一种发音纠正方法，其特征在于，应用于如权利要求1至7之一所述发音纠正系统中，包括：

输出基于用户学习数据确定的测试内容；

采集用户根据所述测试内容输入的第一测试数据并确定发音纠正策略，其中所述第一测试数据包括面部图像数据和语音数据；

从所述第一测试数据中提取用户发音特征并匹配对应的发音纠正策略；

基于所述发音纠正策略向用户反馈发音纠正内容，所述发音纠正内容用于指示发音差异类型以及对应的发音纠正策略。

9.一种介质，存储有程序代码，所述程序代码当被处理器执行时，实现如权利要求1至7之一所述发音纠正系统中任一模块配置的功能，或者实现如权利要求8所述的方法。

10.一种计算设备，包括处理器和存储有程序代码的存储介质，所述程序代码当被处理器执行时，实现如权利要求1至7之一所述发音纠正系统中任一模块配置的功能，或者实现如权利要求8所述的方法。