[发明专利]基于语音文本深度融合特征的摘要自动生成系统及方法有效
申请号: | 202011198008.5 | 申请日: | 2020-10-30 |
公开(公告)号: | CN112417134B | 公开(公告)日: | 2022-05-13 |
发明(设计)人: | 申树藩;张思琪;周逸伦;卫志华 | 申请(专利权)人: | 同济大学 |
主分类号: | G06F16/34 | 分类号: | G06F16/34;G06F16/33;G06F40/126;G06F40/232;G06F40/284;G06K9/62;G10L15/26 |
代理公司: | 上海科律专利代理事务所(特殊普通合伙) 31290 | 代理人: | 叶凤 |
地址: | 200092 *** | 国省代码: | 上海;31 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | 基于语音文本深度融合的摘要自动生成系统及方法,包括预处理与语音对应模块、编码器模块、解码器特征融合模块、损失函数模块。预处理与语音对应模块包括文本获取和语音对应。解码器特征融合模块包括中间摘要生成、声音特征的融合、修正后摘要生成。损失函数模块包括中间摘要损失函数、修正后摘要的评估函数。对于用户语音数据,通过文本获取得到语音对应的文本,经过语音对应得到按字对应的语音特征;文本数据经过预训练xlnet编码器,得到文本的向量表示;文本向量与语音特征通过解码器的声音特征融合以及中间摘要生成后学习得到中间摘要;对于中间摘要重新利用xlnet编码得到对于文本的进一步理解,最后再经过修正后摘要生成学习得到最终的摘要。 | ||
搜索关键词: | 基于 语音 文本 深度 融合 特征 摘要 自动 生成 系统 方法 | ||
【主权项】:
暂无信息
下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于同济大学,未经同济大学许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/patent/202011198008.5/,转载请声明来源钻瓜专利网。
- 上一篇:一种搭载可移动暗房的分步式计算机视觉检测装置
- 下一篇:智能安全用电服务装置