[发明专利]一种基于注意力与聚合机制的文章与问题的融合方法有效
申请号: | 201910887855.3 | 申请日: | 2019-09-19 |
公开(公告)号: | CN110633472B | 公开(公告)日: | 2021-03-12 |
发明(设计)人: | 李建平;顾小丰;胡健;张建国;孙睿男;苌浩阳;娄泽宇 | 申请(专利权)人: | 电子科技大学 |
主分类号: | G06F40/205 | 分类号: | G06F40/205 |
代理公司: | 成都正华专利代理事务所(普通合伙) 51229 | 代理人: | 陈选中 |
地址: | 611731 四川省成*** | 国省代码: | 四川;51 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | 本发明公开了一种基于注意力与聚合机制的文章与问题的融合方法,其包括以下步骤:S1、将编码后的文章向量和问题向量分别输入双向注意力模型和共同注意力模型;S2、将步骤S1中的两个输出进行聚合,得到聚合后的向量P3;S3、将P3与编码前的文章向量P进行聚合得到文本编码向量P4;S4、获取文章内部单词之间的全局交互信息;S5、获取使用自注意力模型后的文本向量P5;S6、将P4和P5进行聚合得到聚合后的数据P6;S7、将P6与P进行拼接后送入双向GRU网络中,将双向GRU网络的输出作为文章的上下文语境向量,完成文章与问题的融合。本方法相比FussionNet模型的计算成本更低。 | ||
搜索关键词: | 一种 基于 注意力 聚合 机制 文章 问题 融合 方法 | ||
【主权项】:
1.一种基于注意力与聚合机制的文章与问题的融合方法,其特征在于,包括以下步骤:/nS1、将编码后的文章向量输入双向注意力模型,将编码后的问题向量输入共同注意力模型,分别得到双向注意力模型的输出P1和共同注意力模型的输出P2;/nS2、根据聚合机制将双向注意力模型的输出P1和共同注意力模型的输出P2进行聚合,得到聚合后的向量P3;/nS3、将聚合后的向量P3与编码前的文章向量P进行聚合,得到文本编码向量P4;/nS4、基于文本编码向量P4,根据自注意力模型获取文章内部单词之间的全局交互信息;/nS5、根据全局交互信息和文本编码向量P4获取使用自注意力模型后的文本向量P5;/nS6、根据聚合函数将文本编码向量P4和使用自注意力模型后的文本向量P5进行聚合,得到聚合后的数据P6;/nS7、将聚合后的数据P6与编码前的文字向量P进行拼接,并将拼接后的数据作为输入送入双向GRU网络中,将双向GRU网络的输出作为文章的上下文语境向量,完成文章与问题的融合。/n
下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于电子科技大学,未经电子科技大学许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/patent/201910887855.3/,转载请声明来源钻瓜专利网。