[发明专利]一种基于口型识别的英语发音质量评估方法

说明书

本发明涉及一种基于口型识别的英语发音质量评估方法，解决的是误差高不能个体评估的技术问题，通过采用在唇语识别的技术长加入唇语前部空气流动场检测，实现唇语作假数据剔除，降低误差的技术方案，较好的解决了该问题，可用于英语教学中。

技术领域

本发明涉及英语教学领域，具体涉及一种基于口型识别的英语发音质量评估方法。

背景技术

英语教学是指对于英语是或者不是第一语言的人进行教授英语的过程。英语教学涉及多种专业理论知识，包括语言学、第二语言习得、词汇学、句法学、文体学、语料库理论、认知心理学等内容。英语教学是一个循序渐进的过程，无论是对于英语是或者不是第一语言的人来说，英语学习在全球化快速发展的今天都是至关重要的。

现有的英语教学中，对于学生的发音质量评估存在不能有效、简单的确定发音与否和发音质量。本发明提供一种口型识别的英语发音质量评估方法，解决了目前口语识别进行英语发音过程中口语识别失误的技术问题。

发明内容

本发明所要解决的技术问题是现有技术中存在的识别效果差的技术问题。提供一种新的基于口型识别的英语发音质量评估方法，该基于口型识别的英语发音质量评估方法具有误差率低的特点。

为解决上述技术问题，采用的技术方案如下：

一种基于口型识别的英语发音质量评估方法，所述基于口型识别的英语发音质量评估方法包括：

步骤1，使用超高速摄像机采集人英语发音时至少包含人脸部、唇部对应前部空气区域的视频图像；同时采集与视频图像对应的英语音频数据；

步骤2，定位唇部，识别唇部特征，根据时间序列建立唇动视觉特征序列；根据唇部定位数据，预处理唇部对应前部空气区域的视频图像，提取空气流动特征序列；

步骤3，将英语音频数据与唇动视觉特征序列、空气流动特征序列建立联系，使用预定义的英语口型数据库训练出模型来完成口型识别，并根据空气流动特征序列修正口型识别数据；

步骤4，依据口型识别结果建立英语教学质量数据库，实时识别学生口语，根据预定义的评分规则，进行质量判别。

本发明的工作原理：现有的多人英语教学中，因为在英语发音教学时多个人进行英语发音造成声音混合，很难进行单个英语发音质量评估。本发明通过对英语发音教学时学生人脸视频图像及唇部前部区域内空气流动场的采集，通过唇语识别技术实现每个学生的英语发音数据，并通过空气流动场的变化，剔除学生只做口型不发声的误差数据。最终实现精度较高的多人英语教学中的个体英语发音质量识别。

上述方案中，为优化，进一步地，步骤3中根据空气流动特征序列修正口型识别数据包括：判断空气流动特征序列中流动特征值为0所对应的口型识别结果并定义对应的英语发音质量评分为0。

进一步地，步骤2中提取空气流动特征序列包括：建立唇部对应前部空气区域的静态空气场，监测静态空气场，有英语发音时检测静态空气场的场图变化，定义无场图变化为未进行英语发音，对应的口语识别数据无效。

进一步地，使用预定义的英语口型数据库训练出模型来完成口型识别是利用深度学习方法提取唇部特征，构建神经网络模型，将采集到的英语口语唇型数据输入到神经网络模型中进行训练。

进一步地，步骤2定位唇部采用人眼定位方法进行唇部位置定位。

本发明的有益效果：本发明通过唇语识别实现个体英语发音数据提取，通过空气场变化特征提取剔除明显误差数据，降低英语发音质量评估的误差性。

附图说明

下面结合附图和实施例对本发明进一步说明。

图1，实施例1中的英语发音质量评估方法流程图。

具体实施方式