[发明专利]关键词的生成方法、装置、设备和介质

说明书

本公开提供一种关键词的生成方法、装置、设备和介质，所述方法包括：通过预置的文本编码器对文本向量进行编码，获得文本隐向量，其中，所述文本向量通过对待处理的文本进行预处理得到；通过预置的句法编码器对词性向量进行编码，得到句法隐向量，其中，所述词性向量通过对所述待处理的文本进行句法分析得到；将所述文本隐向量和所述句法隐向量进行融合，得到融合向量；通过预置的解码器对所述融合向量进行解码，得到单词的概率分布；根据所述单词的概率分布生成所述关键词。本公开的技术方案可以提高预测关键词的准确率。

技术领域

本公开涉及数据处理技术领域，尤其涉及一种关键词的生成方法、装置、电子设备和非暂态计算机可读存储介质。

背景技术

关键词可以直接描述文章的核心内容，在信息抽取、文档分类、智能对话等多个自然语言处理任务中有着广泛的应用。因此，关键词提取技术一直是学术界和工业界的研究热点。

在各种关键词提取技术中，目前最优的技术是基于深度学习的关键词生成方法。具体来讲，在基于深度学习的关键词生成方法中，可以应用编码器和解码器在语义理解的基础上生成目标关键词。编码器的作用是将输入的文本序列压缩为一个包含语义特征的文本向量。解码器的作用将编码器得到的文本向量解压为最后的预测输出。

在上述关键词生成方法中，关键词的预测完全依赖于数据的端到端的深度学习模型。相关技术中的深度学习模型的输入只有单一维度的文本信息，而生成关键词往往需要综合考虑多个维度的信息，尽管深度学习模型有很强的拟合和学习能力，但仅仅依赖文本数据和深度学习模型本身难以完全学习到多个维度的特征。这样，生成的关键词准确率会随之大大降低。

发明内容

本公开提供一种关键词的生成方法、装置、电子设备和非暂态计算机可读存储介质，用以解决现有技术中预测关键词时准确率较低的缺陷，提高预测关键词的准确率。

本公开提供一种关键词的生成方法，包括：通过预置的文本编码器对文本向量进行编码，获得文本隐向量，其中，所述文本向量通过对待处理的文本进行预处理得到；通过预置的句法编码器对词性向量进行编码，得到句法隐向量，其中，所述词性向量通过对所述待处理的文本进行句法分析得到；将所述文本隐向量和所述句法隐向量进行融合，得到融合向量；通过预置的解码器对所述融合向量进行解码，得到单词的概率分布；根据所述单词的概率分布生成所述关键词。

根据本公开提供的一种关键词的生成方法，所述通过预置的文本编码器对文本向量进行编码之前，所述方法还包括：对所述待处理的文本进行分词，得到所述待处理的文本对应的词序列；根据词嵌入矩阵和所述词序列得到所述文本向量。

根据本公开提供的一种关键词的生成方法，所述通过预置的句法编码器对词性向量进行编码之前，所述方法还包括：对所述待处理的文本进行句法分析，得到所述待处理的文本的句法结构和单词间的依存关系；根据词性嵌入矩阵、所述句法结构和所述依存关系得到所述词性向量。

根据本公开提供的一种关键词的生成方法，所述通过预置的句法编码器对词性向量进行编码，得到句法隐向量，包括：根据所述词性向量获取节点间的句法关联值，其中，所述节点为根据所述依存关系构建的图中的节点，所述图还包括根据所述依存关系连接所述节点的边；根据所述句法关联值获取各个节点的重要度；根据所述重要度和所述节点获取所述句法隐向量。

根据本公开提供的一种关键词的生成方法，所述将所述文本隐向量和所述句法隐向量进行融合，得到融合向量，包括：根据所述文本隐向量和所述句法隐向量加权求和后的正切值得到所述融合向量。

根据本公开提供的一种关键词的生成方法，所述通过预置的解码器对所述融合向量进行解码，得到单词的概率分布，包括：根据所述融合向量生成编码向量；根据当前时刻解码器生成的解码隐向量和所述编码向量生成投影向量；根据所述投影向量获取所述单词的概率分布。