[发明专利]一种语音唤醒方法及装置有效
申请号: | 202110437391.3 | 申请日: | 2021-04-22 |
公开(公告)号: | CN112951211B | 公开(公告)日: | 2022-10-18 |
发明(设计)人: | 黎塔;刘作桢;张鹏远;颜永红 | 申请(专利权)人: | 中国科学院声学研究所 |
主分类号: | G10L15/02 | 分类号: | G10L15/02;G10L15/08;G10L15/16;G10L15/22 |
代理公司: | 北京亿腾知识产权代理事务所(普通合伙) 11309 | 代理人: | 陈霁 |
地址: | 100190 *** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 语音 唤醒 方法 装置 | ||
1.一种语音唤醒方法,其特征在于,包括:
接收用户语音;
提取所述用户语音中每一帧的声学特征;
将所述用户语音中每一帧的声学特征和第一音素序列输入训练后的关键词偏置声学模型中,得到所述第一音素序列中的每一个音素在所述用户语音中每一帧的后验概率;其中,所述第一音素序列是预定义的关键词的音素序列;
对所述后验概率进行最小编辑距离加和置信度判决;
若所述后验概率通过最小编辑距离加和置信度判决,则触发唤醒系统;
其中,所述训练后的关键词偏置声学模型包括:RNN-T网络和注意力偏置模块;
所述RNN-T网络,包括声学编码器、文本编码器和联合建模编码器;其中,所述联合建模编码器与一个softmax函数连接,所述softmax函数的输出作为所述RNN-T网络的最终输出;
所述注意力偏置模块,包括关键词编码器和注意力模块;
所述方法还包括:
针对所述第一音素序列中的每一个音素,确定出其在所述用户语音中每一帧的后验概率中的最大值;
将每一个音素在所述用户语音中每一帧的后验概率中的最大值加和得到后验概率加和置信度;
将所述后验概率加和置信度除以第一音素序列的长度,得到第一后验概率加和置信度;
若所述第一后验概率加和置信度大于预设阈值,则确定第一用户语音;其中,所述第一用户语音为包含关键词的用户语音;
所述对所述后验概率进行最小编辑距离加和置信度判决,包括:
对所述第一用户语音对应的音素序列中的每一个音素在该第一用户语音中每一帧的后验概率进行贪心解码,得到推测序列;
根据所述第一音素序列与所述推测序列的对应关系,确定最小编辑距离概率加和置信度。
2.根据权利要求1所述的方法,其特征在于,所述方法还包括:
根据所述关键词编码器的输出和所述文本编码器的上一状态输出,确定所述注意力模块的输出。
3.根据权利要求1所述的方法,其特征在于,所述方法还包括:
将所述注意力偏置模块的输出与所述RNN-T网络的上一状态输出进行拼接,得到拼接结果;
将所述拼接结果输入所述文本编码器中。
4.根据权利要求1所述的方法,其特征在于,所述方法还包括:
在训练所述关键词偏置声学模型过程中,参考答案中的部分词序列和随机生成的词序列作为关键词,以音素序列的形式输入所述关键词编码器中。
5.根据权利要求1所述的方法,其特征在于,所述若所述后验概率通过最小编辑距离加和置信度判决,则触发唤醒系统,包括:
将所述最小编辑距离概率加和置信度除以第一音素序列的长度,得到第一最小编辑距离概率加和置信度;
在所述第一最小编辑距离概率加和置信度大于预设阈值的情况下,根据确定最小编辑距离概率加和置信度过程中所述第一音素序列的第一概率与所述推测序列的第二概率,确定近似似然值置信度;其中,所述第一音素序列的第一概率根据正确和替换错的时间点对应所述关键词的音素的概率、插入错的时间点对应blank的概率和删除错的时间点对应所述关键词的音素的概率确定;所述推测序列的第二概率根据正确和替换错的时间点对应所述推测序列的音素的概率、插入错的时间点对应blank的概率和删除错的时间点对应blank的概率确定;
将所述近似似然值置信度除以第一音素序列的长度,得到第一近似似然值置信度;
在所述第一近似似然值置信度大于预设阈值的情况下,触发所述唤醒系统。
6.一种语音唤醒装置,其特征在于,包括至少一个处理器,所述处理器用于执行存储器中存储的程序,当所述程序被执行时,使得所述装置执行:
如权利要求1-5任一项所述的方法。
7.一种非暂态计算机可读存储介质,其上存储有计算机程序,其特征在于,该计算机程序被处理器执行时实现如权利要求1至5任一所述的方法。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于中国科学院声学研究所,未经中国科学院声学研究所许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202110437391.3/1.html,转载请声明来源钻瓜专利网。
- 上一篇:一种新式即热电热水龙头
- 下一篇:一种利用餐厨废弃物制备有机肥设备