[发明专利]基于卷积自注意力变换网络的轻量级端到端语音识别方法有效
申请号: | 202110398481.6 | 申请日: | 2021-04-12 |
公开(公告)号: | CN113140220B | 公开(公告)日: | 2023-04-18 |
发明(设计)人: | 张晓雷;李盛强;陈星 | 申请(专利权)人: | 西北工业大学;西北工业大学深圳研究院 |
主分类号: | G10L15/26 | 分类号: | G10L15/26;G10L15/06 |
代理公司: | 西安凯多思知识产权代理事务所(普通合伙) 61290 | 代理人: | 刘新琼 |
地址: | 710072 *** | 国省代码: | 陕西;61 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | 本发明公开了一种基于卷积自注意力变换网络的轻量级端到端语音识别方法,首先构建基于卷积自注意力变换网络的轻量级端到端语音识别模型,该模型对卷积自注意力变换网络进行改进,构成高效卷积自注意力变换网络;将低秩分解用于卷积自注意力变换网络中的前馈层,形成低秩前馈模块;提出多头高效自注意力MHESA,并采用MHESA取代了卷积自注意力变换网络编码器中的点积自注意力;最终经过训练得到语音识别模型对语音进行识别。本发明将编码器自注意力层的计算复杂度降为线性,并将整个模型的参数量减少了约50%,而性能基本不变。 | ||
搜索关键词: | 基于 卷积 注意力 变换 网络 轻量级 端到端 语音 识别 方法 | ||
【主权项】:
暂无信息
下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于西北工业大学;西北工业大学深圳研究院,未经西北工业大学;西北工业大学深圳研究院许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/patent/202110398481.6/,转载请声明来源钻瓜专利网。