[发明专利]一种文本分类方法及装置有效

专利信息
申请号: 202110810164.0 申请日: 2021-07-18
公开(公告)号: CN113536806B 公开(公告)日: 2023-09-08
发明(设计)人: 刘洋 申请(专利权)人: 北京奇艺世纪科技有限公司
主分类号: G06F40/30 分类号: G06F40/30;G06F18/2415;G06F18/2431
代理公司: 北京柏杉松知识产权代理事务所(普通合伙) 11413 代理人: 孟维娜;高莺然
地址: 100080 北京市海淀区*** 国省代码: 北京;11
权利要求书: 查看更多 说明书: 查看更多
摘要:
搜索关键词: 一种 文本 分类 方法 装置
【说明书】:

发明实施例提供了一种文本分类方法及装置,涉及信息处理技术领域,上述方法包括:并行调用各第一分类层级对应的第一分类方式对待分类文本进行分类,得到待分类文本在各第一分类层级的候选分类类型;根据各候选分类类型,获得沿各候选分类类型在第一分类层级间的层级关系对待分类文本进行分类的中间分类类型;以中间分类类型对应的第二分类方式为起始分类方式,沿各分类类型在第二分类层级间的层级关系,逐层级串行调用各第二分类层级对应的第二分类方式对待分类文本进行分类,直至达到预设的最低分类层级,得到待分类文本的分类结果。应用本发明实施例提供的方案进行文本分类,能够提高文本分类的准确度。

技术领域

本发明涉及信息处理技术领域,特别是涉及一种文本分类方法及装置。

背景技术

随着互联网技术的发展,各种基于网络的应用场景中涉及的数据越来越多。一些应用场景中需要对场景中的文本进行分类,从而基于分类结果进行后续处理。例如,客服场景中,可以对用户发布的文本进行分类,根据分类结果定位用户期望解决的问题类别,从而提高为用户解决问题的效率。用于用户发表评论、动态的社交场景中,可以对用户所发布的文本进行分类,根据分类结果确定用户的情感倾向,从而对用户所发布的文本进行过滤,维护网络环境。

现有技术中,对文本进行分类时一般采用预设的统一分类方式对文本进行分类。例如,上述统一分类方式可以是基于贝叶斯算法的分类方式等。然而,各种不同的应用场景下文本的类别一般较多。例如,新闻场景中,文本的类别可以包括:篮球类新闻、足球类新闻、羽毛球类新闻、金融类新闻、房地产类新闻、养生类新闻、育儿类新闻等。这种情况下,采用上述统一分类方式对文本进行分类时,需要上述统一分类方式兼顾各种不同类型的文本的特征,具有较强的鲁棒性,然而,实际应用中,对于各种单一分类方式而言,特点各不相同,难以兼顾各种不同的类型的文本的特征,从而易导致文本分类的准确度低。

发明内容

本发明实施例的目的在于提供一种文本分类方法及装置,以提高文本分类的准确度。具体技术方案如下:

第一方面,本发明实施例提供了一种文本分类方法,所述方法包括:

并行调用各第一分类层级对应的第一分类方式对待分类文本进行分类,得到所述待分类文本在各第一分类层级的候选分类类型,其中,所述第一分类方式用于:按照所对应分类层级包括的所有分类类型对文本进行分类;

根据各候选分类类型,获得沿各候选分类类型在第一分类层级间的层级关系对所述待分类文本进行分类的中间分类类型;

以所述中间分类类型对应的第二分类方式为起始分类方式,沿各分类类型在第二分类层级间的层级关系,逐层级串行调用各第二分类层级对应的第二分类方式对所述待分类文本进行分类,直至达到预设的最低分类层级,得到所述待分类文本的分类结果,其中,一个第二分类方式用于:按照所对应分类层级中一个分类类型包括的所有子类型对文本进行分类,第一分类层级高于第二分类层级,串行调用的一第二分类层级对应的第二分类方式为:按照在上一层级分类得到的分类类型包括的所有子类型对文本进行分类的方式。

本发明的一个实施例中,所述根据各候选分类类型,获得沿各候选分类类型在第一分类层级间的层级关系对所述待分类文本进行分类的中间分类类型,包括:

沿各候选分类类型在第一分类层级间的层级关系,从各候选分类类型中选择分类类型,得到多个类型组,其中,每一类型组中属于同一分类层级的分类类型数量为1、且属于相邻分类层级的分类类型满足:属于低分类层级的分类类型为属于高分类层级的分类类型的子类型;

根据所述待分类文本的分类类型为各候选分类类型的概率,计算所述待分类文本的分类类型为各类型组包括的候选分类类型的全局概率;

按照全局概率由高到低的顺序,从多个类型组中选择所述待分类文本的候选类型组;

下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。

该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京奇艺世纪科技有限公司,未经北京奇艺世纪科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服

本文链接:http://www.vipzhuanli.com/pat/books/202110810164.0/2.html,转载请声明来源钻瓜专利网。

×

专利文献下载

说明:

1、专利原文基于中国国家知识产权局专利说明书;

2、支持发明专利 、实用新型专利、外观设计专利(升级中);

3、专利数据每周两次同步更新,支持Adobe PDF格式;

4、内容包括专利技术的结构示意图流程工艺图技术构造图

5、已全新升级为极速版,下载速度显著提升!欢迎使用!

请您登陆后,进行下载,点击【登陆】 【注册】

关于我们 寻求报道 投稿须知 广告合作 版权声明 网站地图 友情链接 企业标识 联系我们

钻瓜专利网在线咨询

周一至周五 9:00-18:00

咨询在线客服咨询在线客服
tel code back_top