[发明专利]文本匹配和对抗文本识别方法、装置及设备在审
申请号: | 202011350754.1 | 申请日: | 2020-11-26 |
公开(公告)号: | CN112256841A | 公开(公告)日: | 2021-01-22 |
发明(设计)人: | 郑行;孙清清;沈淑;张天翼 | 申请(专利权)人: | 支付宝(杭州)信息技术有限公司 |
主分类号: | G06F16/33 | 分类号: | G06F16/33;G06F40/279;G06F40/30 |
代理公司: | 北京国昊天诚知识产权代理有限公司 11315 | 代理人: | 许振新 |
地址: | 310000 浙江省杭州市*** | 国省代码: | 浙江;33 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 文本 匹配 对抗 识别 方法 装置 设备 | ||
1.一种文本匹配方法,包括:
确定第一文本的第一文本向量和第二文本的第二文本向量;
确定所述第一文本向量和所述第二文本向量的对齐信息,所述对齐信息用于描述所述第一文本和所述第二文本中的文本单元之间的相似关系以及各文本单元在所述第一文本和所述第二文本的文本相似度中所占的权重;
对所述对齐信息进行特征抽取聚集处理,得到关键对齐信息,所述关键对齐信息用于描述所述第一文本和所述第二文本中的关键文本单元之间的相似关系以及关键文本单元在所述第一文本和所述第二文本的文本相似度中所占的权重;
基于所述第一文本向量、所述第二文本向量和所述关键对齐信息,确定所述第一文本和所述第二文本之间的匹配关系。
2.根据权利要求1所述的方法,所述确定第一文本的第一文本向量和第二文本的第二文本向量,包括:
分别对所述第一文本和所述第二文本进行文本切分,得到第一文本单元集和第二文本单元集;
分别对所述第一文本单元集和所述第二文本单元集进行向量化,得到第一文本单元向量集和第二文本单元向量集;
基于第一文本单元向量集和第二文本单元向量集,分别生成所述第一文本的第一文本向量和第二文本的第二文本向量。
3.根据权利要求2所述的方法,在所述分别对所述第一文本和所述第二文本进行文本切分,得到第一文本单元集和第二文本单元集之前,还包括:
确定所述第一文本和所述第二文本的文本类型;
若所述文本类型属于预设的强语义场景,则选择词汇级的文本单元维度进行文本切分;
若所述文本类型属于预设的弱语义场景,则选择字符级或者子词级的文本单元维度进行文本切分。
4.根据权利要求2所述的方法,所述分别对所述第一文本单元集和所述第二文本单元集进行向量化,得到第一文本单元向量集和第二文本单元向量集,包括:
若所述第一文本和所述第二文本属于预设的特定领域,则将所述第一文本单元集和所述第二文本单元集分别输入至词向量模型中,得到第一文本单元向量集和第二文本单元向量集,所述词向量模型基于所述特定领域的语料训练,用于生成文本单元集中的每个文本单元的文本单元向量。
5.根据权利要求2所述的方法,所述基于第一文本单元向量集和第二文本单元向量集,分别生成所述第一文本的第一文本向量和第二文本的第二文本向量,包括:
分别对所述第一文本单元向量集内的文本单元向量和所述第二文本单元向量集内的文本单元向量进行拼接,得到第一拼接文本向量和第二拼接文本向量;
基于预设深度学习文本特征抽取器,分别分析所述第一拼接文本向量中的向量之间上下文关联和所述第二拼接文本向量中的向量之间的上下文关联;
基于所述向量之间的上下文关联,分别生成所述第一拼接文本向量和所述第二拼接文本向量的句子级别的表示,得到第一文本向量和第二文本向量。
6.根据权利要求5所述的方法,还包括:
确定所述第一文本和所述第二文本的文本复杂类型;
若所述文本复杂类型属于短文本类型,则选择基于卷积神经网络CNN或者循环神经网络RNN结构的文本特征抽取器;
若所述文本复杂类型属于长文本类型或者语义复杂类型,则选择基于自注意力机制的文本特征抽取器。
7.根据权利要求1所述的方法,所述确定所述第一文本向量和所述第二文本向量的对齐信息,包括:
确定所述第一文本向量对应的句内上下文关联依赖关系和所述第二文本向量对应的句内上下文关联依赖关系;
基于所述第一文本向量和所述第二文本向量的语义信息,对所述第一文本向量和所述第二文本向量进行句间对齐处理,得到句间对齐信息,所述句间对齐信息用于描述文本向量之间的文本单元的相似关系;
基于所述句内上下文关联依赖关系和所述句间对齐信息,生成所述第一文本向量和所述第二文本向量的对齐信息。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于支付宝(杭州)信息技术有限公司,未经支付宝(杭州)信息技术有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202011350754.1/1.html,转载请声明来源钻瓜专利网。
- 上一篇:TPE蜂巢透气释压枕
- 下一篇:一种便于安装拆卸的转杯纺纱机用纱筒