[发明专利]语音识别方法、装置、存储介质及设备

权利要求书

1.一种语音识别方法，其特征在于，所述方法包括：

获取英文音素和中文音素，并根据所述英文音素和中文音素训练声学模型；

获取英中文测试词典；

根据所述英文音素、所述中文音素、所述声学模型、所述英中文测试词典，结合语言模型，构建解码图；

采集待识别的语音；以及

根据所构建的解码图对所述语音进行解码识别；

其中，所述获取英中文测试词典包括：

根据中文词典和所述中文音素，确定所述中文词典中各中文词语的第一音素序列；

根据所述英文音素，对各中文词语进行单词到音素G2P训练，以确定各中文词语的第二音素序列；以及

根据英文词典和所述英文音素，确定所述英文词典中各英文单词的英文音素序列。

2.根据权利要求1所述的语音识别方法，其特征在于，所述根据所述英文音素和中文音素训练声学模型包括：

获取包括英文数据和中文拼音数据的训练数据；以及

根据所述英文音素、所述中文音素以及所述训练数据，结合英文词典、中文词典，利用高斯混合模型和/或神经网络模型进行训练，以得到所述声学模型。

3.根据权利要求1所述的语音识别方法，其特征在于，所述根据所构建的解码图对所述待识别的语音进行解码识别，包括：

实时提取所述语音所包括的音素特征；

根据所述音素特征和所述声学模型，确定每一所述音素特征与所述语音的匹配概率；

根据所述匹配概率和所述解码图，确定与所述语音匹配的音素序列；以及

根据所述语音匹配的音素序列和所述英中文测试词典，确定所述语音对应的中文词语和/或英文单词以及所述中文词语和所述英文单词的排列顺序，

其中，所述音素特征包括以下至少一者：

第一音素序列；第二音素序列；以及英文音素序列。

4.一种语音识别装置，其特征在于，所述语音识别装置包括：

模型训练模块，用于获取英文音素和中文音素，并根据所述英文音素和中文音素训练声学模型；

测试词典获取模块，用于获取英中文测试词典；

构建模块，用于根据所述英文音素、所述中文音素、所述声学模型、所述英中文测试词典，结合语言模型，构建解码图；

采集模块，用于采集待识别的语音；以及

识别模块，根据所构建的解码图对所述待识别的语音进行解码识别；

其中，所述测试词典获取模块包括：

第一确定子模块，用于根据中文词典和所述中文音素，确定所述中文词典中各中文词语的第一音素序列；

第二确定子模块，用于根据所述英文音素，对各中文词语进行单词到音素G2P训练，以确定各中文词语的第二音素序列；以及

第三确定子模块，用于根据英文词典和所述英文音素，确定所述英文词典中各英文单词的英文音素序列。

5.根据权利要求4所述的语音识别装置，其特征在于，所述模型训练模块包括：

数据获取子模块，用于获取包括英文数据和中文拼音数据的训练数据；以及

训练子模块，用于根据所述英文音素、所述中文音素以及所述训练数据，结合英文词典、中文词典，利用高斯混合模型和/或神经网络模型进行训练，以得到所述声学模型。

6.根据权利要求4所述的语音识别装置，其特征在于，所述识别模块包括：

特征提取子模块，用于实时提取所述语音所包括的音素特征；

匹配子模块，用于根据所述音素特征和所述声学模型，确定每一所述音素特征与所述语音的匹配概率；

音素确定子模块，用于根据所述匹配概率和所述解码图，确定与所述语音匹配的音素序列；以及

词语确定子模块，用于根据所述英中文测试词典确定所述语音对应的中文词语和/或英文单词以及所述中文词语和所述英文单词的排列顺序，

其中，所述音素特征包括以下至少一者：

第一音素序列；第二音素序列；以及英文音素序列。

7.一种机器可读存储介质，其特征在于，所述机器可读存储介质上存储有指令，所述指令用于使得所述机器可读存储介质能够执行根据权利要求1-3中任意一项所述的语音识别方法。

8.一种设备，其特征在于，所述设备包括至少一个处理器、以及与所述处理器连接的至少一个存储器、总线；其中，所述处理器、所述存储器通过所述总线完成相互间的通信；所述处理器用于调用所述存储器中的程序指令，以执行权利要求1-3中任一项所述的语音识别方法。