[发明专利]一种文本信息分类方法、装置、电子设备及存储介质在审

专利信息
申请号: 202210607812.7 申请日: 2022-05-31
公开(公告)号: CN114943295A 公开(公告)日: 2022-08-26
发明(设计)人: 范潇;贾炎;康志峰 申请(专利权)人: 中国电信股份有限公司
主分类号: G06K9/62 分类号: G06K9/62;G06F40/30;G06F40/289
代理公司: 北京润泽恒知识产权代理有限公司 11319 代理人: 苏培华
地址: 100033 *** 国省代码: 北京;11
权利要求书: 查看更多 说明书: 查看更多
摘要:
搜索关键词: 一种 文本 信息 分类 方法 装置 电子设备 存储 介质
【说明书】:

发明实施例提供了一种文本信息分类方法、装置、电子设备及存储介质,通过在完成对标签向量矩阵和文本向量矩阵构建后的推理过程中,且在通过既有模型利用用于表达类别标签置信度的标签观测概率作为推理依据的前提下,通过计算出不同层次之间的标签转移概率,对各层级的类别标签的分类结果进行约束,避免了在输出错误标签的置信度高于正确标签的置信度时,将错误标签作为标签预测结果,并将错误信息传递给下层的预测中,从而提高了针对文本信息分类的准确率。

技术领域

本发明涉及文本信息分类技术领域,特别是涉及一种文本信息分类方法、一种文本信息分类装置、一种电子设备以及一种计算机可读存储介质。

背景技术

多层次文本分类是处理大规模文本信息的关键技术,在诸多针对大规模文本信息的应用场景中,往往由多层次结构对文档进行组织,例如,某文档(网页或电子邮件)可以与多个类别相关联,而这些类别可以被存储于文件储存树或者有向无环图中。

在相关技术中,由于针对多层次文本分类的机制不完善,随着层级和文本类别的增加,算法的准确率会随着层级和文本类别的增加而急剧下降,从而导致针对多层次文本分类的准确率低下。

发明内容

本发明实施例是提供一种文本信息分类方法、装置、电子设备以及计算机可读存储介质,以解决针对多层次文本分类的准确率低下的问题。

本发明实施例公开了一种文本信息分类方法,所述方法应用于文本分类模型,所述文本分类模型具有多个层级,所述层级包含对应的标签节点,所述标签节点具有对应的类别标签,所述类别标签用于表达所述标签节点的类别,所述方法可以包括:

生成针对所述类别标签的标签向量,并采用所述标签向量生成标签向量矩阵;

生成针对所述文本信息的文本向量,并采用所述文本向量生成文本向量矩阵;

生成针对所述类别标签的标签转移概率;

将所述标签向量矩阵和所述文本向量矩阵输入至所述文本分类模型,并生成针对所述类别标签的标签观测概率;

基于所述标签观测概率和所述标签转移概率,确定针对所述类别标签的分类结果,并采用所述分类结果作为针对所述文本信息的分类结果。

可选地,所述文本分类模型集成有词向量模型,所述标签节点包括父节点,以及,与所述父节点具有直接关联关系的子节点,所述生成针对所述类别标签的标签向量,并采用所述标签向量生成标签向量矩阵的步骤可以包括:

采用所述词向量模型确定针对所述子节点的子类别标签的子标签向量;

确定所述子节点的个数;

采用所述子标签向量,和,所述子节点的个数计算生成针对所述父节点的父类别标签的父标签向量;

采用所述子标签向量,和,所述父标签向量构建标签向量矩阵。

可选地,所述生成针对所述类别标签的标签转移概率的步骤包括:

在所述父节点所在的父层级中确定出针对所述父类别标签的父标签类别数量;

在所述子节点所在的子层级中确定出针对所述子类别标签的子标签类别数量;

采用所述父标签类别数量和所述子标签类别数量计算生成针对所述类别标签的标签转移概率。

可选地,所述基于所述标签观测概率和所述标签转移概率,确定针对所述类别标签的分类结果,并采用所述分类结果作为针对所述文本信息的分类结果的步骤可以包括:

基于维特比算法,采用所述标签观测概率和所述标签转移概率计算出多个所述类别标签两两之间的最短路径;

下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。

该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于中国电信股份有限公司,未经中国电信股份有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服

本文链接:http://www.vipzhuanli.com/pat/books/202210607812.7/2.html,转载请声明来源钻瓜专利网。

×

专利文献下载

说明:

1、专利原文基于中国国家知识产权局专利说明书;

2、支持发明专利 、实用新型专利、外观设计专利(升级中);

3、专利数据每周两次同步更新,支持Adobe PDF格式;

4、内容包括专利技术的结构示意图流程工艺图技术构造图

5、已全新升级为极速版,下载速度显著提升!欢迎使用!

请您登陆后,进行下载,点击【登陆】 【注册】

关于我们 寻求报道 投稿须知 广告合作 版权声明 网站地图 友情链接 企业标识 联系我们

钻瓜专利网在线咨询

周一至周五 9:00-18:00

咨询在线客服咨询在线客服
tel code back_top