[发明专利]命名实体识别方法、设备、装置和计算机可读存储介质

说明书

本发明实施例公开了一种命名实体识别方法、设备、装置和计算机可读存储介质，该方法包括：将文本中的词语映射为向量；对所述向量进行处理，得到所述文本中词语的上下文表示；确定出与所述上下文表示相关的标签转移关系，根据所确定的标签转移关系，为所述文本中词语确定出标签序列。如此，在本发明实施例中，可以确定出与上下文信息相关的标签转移关系；这种动态地确定标签转移关系的方式，可以根据不同的上下文对标签的跳转进行更细致的建模，有助于优化标签跳转以及路径选择，进而可以提高推断标签序列的准确性和可靠性。

技术领域

本发明涉及自然语言处理领域，特别涉及一种命名实体识别方法、设备、装置和计算机可读存储介质。

背景技术

目前，可以采用多种方式实现命名实体识别，例如，可以基于神经网络得到文本中词语的上下文表示，然后根据标签转移关系，推断出文本中词语的合理的标签序列；然而，相关技术中，标签转移关系是与上下文信息无关的，不能反映上下文信息，进而，推断出的标签序列的准确性和可靠性较低。

发明内容

为解决上述技术问题，本发明实施例期望提供一种命名实体识别方法、设备、装置和计算机可读存储介质。

本发明的技术方案是这样实现的：

本发明实施例提供了一种命名实体识别方法，所述方法包括：

将文本中的词语映射为向量；

对所述向量进行处理，得到所述文本中词语的上下文表示；

确定出与所述上下文表示相关的标签转移关系，根据所确定的标签转移关系，为所述文本中词语确定出标签序列。

本发明实施例中，所述确定出与所述上下文表示相关的标签转移关系，包括：

根据所述上下文表示，确定出条件随机场(Conditional Random Field，CRF)模型中使用的转移矩阵；所述转移矩阵用于表征与所述上下文表示相关的标签转移关系；

相应地，根据所确定的标签转移关系，为所述文本中词语确定出标签序列，包括：

利用所述CRF模型，并根据所述转移矩阵，为所述文本中的词语确定出标签序列。

本发明实施例中，所述根据所述上下文表示，确定出CRF模型中使用的转移矩阵，包括：

对所述上下文表示相关的标签转移关系进行建模，得到独立转移矩阵；对共性的标签转移关系进行建模，得到共享转移矩阵；根据所述共享转移矩阵和所述独立转移矩阵，得到CRF模型中使用的转移矩阵。

本发明实施例中，所述根据所述共享转移矩阵和所述独立转移矩阵，得到CRF模型中使用的转移矩阵，包括：

将所述共享转移矩阵和所述独立转移矩阵进行点乘，得到所述CRF模型中使用的转移矩阵。

本发明实施例还提供了一种命名实体识别设备，所述设备包括：处理器和用于存储能够在处理器上运行的计算机程序的存储器，

所述处理器用于运行所述计算机程序时，执行以下步骤：

将文本中的词语映射为向量；

对所述向量进行处理，得到所述文本中词语的上下文表示；

确定出与所述上下文表示相关的标签转移关系，根据所确定的标签转移关系，为所述文本中词语确定出标签序列。

本发明实施例中，所述处理器用于运行所述计算机程序时，具体执行以下步骤：

根据所述上下文表示，确定出CRF模型中使用的转移矩阵；所述转移矩阵用于表征与所述上下文表示相关的标签转移关系；