[发明专利]基于双流自监督网络的语音识别方法、装置、设备及介质在审
申请号: | 202310874348.2 | 申请日: | 2023-07-17 |
公开(公告)号: | CN116863920A | 公开(公告)日: | 2023-10-10 |
发明(设计)人: | 明悦;范春晓;吕柏阳;胡楠楠;周江琬 | 申请(专利权)人: | 北京邮电大学 |
主分类号: | G10L15/06 | 分类号: | G10L15/06;G10L15/16;G10L15/02;G10L15/26;G06N3/09;G06N3/0464 |
代理公司: | 北京市商泰律师事务所 11255 | 代理人: | 毛燕生 |
地址: | 100876 *** | 国省代码: | 北京;11 |
权利要求书: | 暂无信息 | 说明书: | 暂无信息 |
摘要: | 本发明提供了一种基于双流自监督网络的语音识别方法、装置、设备及介质,包括:利用编码与量化模块对目标声学特征进行编码与量化获得语音向量;利用重构预测模块对语音向量进行重构预测获得第一语音表示;同时,利用对比预测模块中的自回归模型对语音向量进行预测获得第二语音表示;利用特征融合子模块对第一语音表示与第二语音表示进行融合获得融合后语音表示;基于目标声学特征,结合第一子模型与CTC模块中的连接时序分类器对融合后语音表示进行识别获得转录文本。本发明能够关注语音详细的上下文信息及语音不同特征之间的差异信息,提高自监督学习的鲁棒性,有效结合生成式和判别式自监督学习的互补优势。 | ||
搜索关键词: | 基于 双流 监督 网络 语音 识别 方法 装置 设备 介质 | ||
【主权项】:
暂无信息
下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京邮电大学,未经北京邮电大学许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/patent/202310874348.2/,转载请声明来源钻瓜专利网。