[发明专利]交互式语言学习系统及其方法

说明书

本发明公开了交互式语言学习系统及其方法，包括：语音参考模块，特征提取模块，音素关联模块，语音学习模块，采集学习者朗读的指定的语音数据；音律修正模块，合成具有参考语音韵律和学习者音色的反馈语音，韵律修正语音能够引导学习者模仿参考语音的韵律；纠正意见模块、音素评价模块以及语音反馈模块将结果保存至数据收集模块，语料库，用于对学习者发送随机的口语信息，学习者学习通过纠正意见模块反馈到数据库。本发明，除了通常的发音评判外，还提供基于音素关联和音素识别的错误检测功能；结合数据库内设标准语音的改进建议和韵律修正语音，可以及时地给学习者以帮助，能够纠正有一定基础学习者的多数非故意错误。

技术领域

本发明涉及交互式语言学习系统及其方法。

背景技术

语言学习是人们所学知识中非常重要的部分之一。也有越来越多的人依靠语言学习辅助工具来提高语言学习的速度和效率。丰富的学习内容、互动的交互方式、个性化的课程、便于操作等方面已经是语言学习系统的发展的必然趋势。

随着计算机、多媒体、语音等技术的不断发展，能够对听说读写等方面有一定程度或部分支持的辅助学习系统不断涌现。从电子辞典的出现，到后来的跟读机、点读机，以及一些口语学习软件比如听力软件等的出现，使学习辅助系统的形式和功能逐渐丰富起来。但现有技术还存在以下问题，这些口语学习软件，功能比较单一，只能给学习者的发音一个整体的评分。然而有些自学者因为自身水平限制，很难完全靠自己发现错误、纠正不正确的发音。

发明内容

本发明的目的在于提供交互式语言学习系统及其方法，以解决上述背景技术中提出的问题。

为实现上述目的，本发明提供如下技术方案：

交互式语言学习系统，包括：

语音参考模块，所述语音参考模块预先对标准朗读声源自动获取并标注；

特征提取模块，其对标注的声源的梅尔频率倒谱系数的参数和短时幅度差函数的基频特征进行计算；

音素关联模块，对计算的梅尔频率倒谱系数的参数以及短时幅度差函数的基频特征进行数据保存并上传到数据库；

语音学习模块，采集学习者朗读的指定的语音数据；

音素识别模块，获取音素关联模块保存的数据；

音律修正模块，合成具有参考语音韵律和学习者音色的反馈语音，韵律修正语音能够引导学习者模仿参考语音的韵律；

错误识别模块，根据数据库对音素识别模块获取的数据进行判断；

纠正意见模块，获取错误识别模块判断的结果；

音素评价模块，获取音素关联模块、音素识别模块参数数据，并对学习者音色的反馈语音进行评价；

语音反馈模块，读取学习者模仿参考语音的韵律结果；

纠正意见模块、音素评价模块以及语音反馈模块将结果保存至数据收集模块，并上传到数据库，用于对学习者语音学习进行反馈调节；

语料库，用于对学习者发送随机的口语信息，学习者学习通过纠正意见模块反馈到数据库。

优选的，所述纠正意见模块包括音素朗读错误的纠正和韵律的反馈。

优选的，所述语料库包括分别建立的参考语料库和识别语料库，用于帮助学习者提高口语水平为目标。

优选的，所述语料库指定其内随机的语料到语音朗读模块与朗读对比模块，学习者通过跟随读取所发出的语料由语音跟读模块获取，并与朗读对比模块对比，将结果发至纠正意见模块。

本发明还提供交互式语言学习方法，包括以下几个步骤：