[发明专利]产品词处理方法及其装置、设备、介质、产品

说明书

本申请公开一种产品词处理方法及其装置、设备、介质、产品，所述方法包括：将商品标题进行分词处理，获得有序的多个分词，构成分词序列；计算各个分词的语义特征向量与所述商品标题的语义特征向量之间的数据距离，相应作为各个分词的相似分值；根据命中预设产品词典中的词元的分词在所述分词序列中的排序信息，量化确定其排序分值；将综合分值最高的分词输出为所述商品标题的产品词，所述综合分值为其相应的分词的相似分值与排序分值之和。本申请能够便捷、高效、准确地从给定的商品标题中确定其相应的产品词，为电商平台服务于其独立站点的商品搜索、商品广告投放、商品归集等下游任务提供基础服务，从而提升电商平台的服务体验。

技术领域

本申请涉及电商信息技术领域，尤其涉及一种产品词处理方法及其相应的装置、计算机设备、计算机可读存储介质，以及计算机程序产品。

背景技术

服务于电商平台的商品归类、商品搜索、广告投放等需要，常需要根据给定的个别关键词从商品数据库中查找确定相关联的商品，实践中，为每个商品预先确定其相对应的产品词，方便对商品进行索引和匹配。

为商品确定产品词，通常是基于商品标题进行的，例如：

常见的方式之一是通过预设的产品词对商品标题进行匹配，当商品标题包含预设的产品词时，该预设产品词即为商品标题的产品词，此一方式由于预采集的产品词难以涵盖海量的现实产品的表达，故成效有限。

另一方式是基于深度学习模型对商品标题进行语义特征表示并做分类映射，从而确定出每个商品标题对应的产品词，这种方式成本较高，且由于分类空间密集，样本特征过度泛化，训练不易，故而成效反而有限。

进一步，在跨境电商场景下，电商平台的各个线上店铺以独立站点部署，在实际运营中，各个独立站点在进行商品有关的信息例如商品标题的表达处理时，往往按照自身的语言表达习惯进行文字组织，导致同一产品的名称可能出现千差万别的文本，进一步降低通过传统技术识别商品标题的产品词的成效。

综上，传统技术对商品标题确定产品词的方案所取得的成效非常有限，难以快速高效地为商品标题确定其相应的产品词，相关技术仍有提升空间。

发明内容

本申请的首要目的在于解决上述问题至少之一而提供一种产品词处理方法及其相应的装置、计算机设备、计算机可读存储介质、计算机程序产品。

为满足本申请的各个目的，本申请采用如下技术方案：

适应本申请的目的之一而提供的一种产品词处理方法，包括如下步骤：

将商品标题进行分词处理，获得有序的多个分词，构成分词序列；

计算各个分词的语义特征向量与所述商品标题的语义特征向量之间的数据距离，相应作为各个分词的相似分值；

根据命中预设产品词典中的词元的分词在所述分词序列中的排序信息，量化确定其排序分值；

将综合分值最高的分词输出为所述商品标题的产品词，所述综合分值为其相应的分词的相似分值与排序分值之和。

深化的部分实施例中，将商品标题进行分词处理，获得多个分词，构成分词序列，包括如下步骤：

获取用户提交的商品标题；

采用预设的分词算法对该商品标题进行分词，获得多个分词；

按照所述多个分词在所述商品标题中的顺序，将所述多个分词构造为分词序列，通过所述分词在所述分词序列中的排序值表征其排序信息。

深化的部分实施例中，计算各个分词的语义特征向量与所述商品标题的语义特征向量之间的数据距离，相应作为各个分词的相似分值，包括如下步骤：

分别对所述各个分词及所述商品标题进行词嵌入，获得各个分词及所述商品标题相应的嵌入向量；