[发明专利]一种文本分类方法、装置、设备及存储介质在审
申请号: | 201910801743.1 | 申请日: | 2019-08-28 |
公开(公告)号: | CN110597988A | 公开(公告)日: | 2019-12-20 |
发明(设计)人: | 朱斌斌;陈朝晖 | 申请(专利权)人: | 腾讯科技(深圳)有限公司 |
主分类号: | G06F16/35 | 分类号: | G06F16/35;G06F16/33;G06F17/27;G06K9/62 |
代理公司: | 44202 广州三环专利商标代理有限公司 | 代理人: | 郝传鑫;贾允 |
地址: | 518057 广东省深圳*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 语句 目标类别 目标关键词 待分类文本 分类标签 文本分类 分词 权重 关联 存储介质 分词处理 分类结果 准确率 词库 申请 匹配 文本 保留 | ||
本申请提供了一种文本分类方法、装置、设备及存储介质,该方法包括:将待分类文本拆分为至少一个语句;对每个语句进行分词处理,得到所述语句对应的分词;将每个语句对应的分词与词库中不同关联深度的关键词进行匹配,得到所述语句对应的目标关键词;确定每个语句对应的目标关键词的分类标签,将所述分类标签确定为所述语句对应的目标类别,所述目标类别包括至少一个目标关键词;基于每个语句对应的目标类别中各个目标关键词的关联深度以及所述目标类别包括的目标关键词的数量,确定所述语句对应的目标类别权重;基于每个语句对应的目标类别权重,确定待分类文本的分类结果。本申请能够保留文本中尽可能多的信息,提高文本分类准确率。
技术领域
本申请属于互联网技术领域,具体涉及一种文本分类方法、装置、设备及存储介质。
背景技术
随着聊天信息、微博、搜索引擎、在线广告、观点评论、开放型问答等的广泛应用,短文本被人们使用的越来越频繁。由于短文本具有字数较少、结构松散、语法随意、停用词占比大等特点,导致短文本的分类较为困难。
现有技术主要采用关键词匹配、文档关键词抽取等方法对短文本进行分类。然而现有的关键词匹配方法主要是从关键词单一维度进行判定分类,分类准确率不高。文档关键词抽取通常通过词频等手段,而短文本场景因词量不足转而会通过汇聚更多短文本拼凑成文档之后,再进行关键词抽取,而对拼凑成的文档进行关键词抽取,会导致抽取结果仅获取了多个短文本中较有共性的问题,丢失了短文本中大量的信息,进而影响短文本的分类准确率。
发明内容
为了保留短文本中尽可能多的信息,提高短文本分类的准确率,本申请提出一种文本分类方法、装置、设备及存储介质。
一方面,本申请提出了一种文本分类方法,所述方法包括:
将待分类文本拆分为至少一个语句;
对每个语句进行分词处理,得到所述语句对应的分词;
将每个语句对应的分词与词库中不同关联深度的关键词进行匹配,得到所述语句对应的目标关键词;
确定每个语句对应的目标关键词的分类标签,将所述分类标签确定为所述语句对应的目标类别;其中,所述目标类别包括至少一个目标关键词;
基于每个语句对应的目标类别中各个目标关键词的关联深度以及所述目标类别包括的目标关键词的数量,确定所述语句对应的目标类别权重;
基于每个语句对应的目标类别权重,确定所述待分类文本的分类结果。
另一方面,本申请提出了一种文本分类装置,所述装置包括:
拆分模块,用于将待分类文本拆分为至少一个语句;
分词模块,用于对每个语句进行分词处理,得到所述语句对应的分词;
匹配模块,用于将每个语句对应的分词与词库中不同关联深度的关键词进行匹配,得到所述语句对应的目标关键词;
目标类别确定模块,用于确定每个语句对应的目标关键词的分类标签,将所述分类标签确定为所述语句对应的目标类别;其中,所述目标类别包括至少一个目标关键词;
权重确定模块,用于基于每个语句对应的目标类别中各个目标关键词的关联深度以及所述目标类别包括的目标关键词的数量,确定所述语句对应的目标类别权重;
分类结果确定模块,用于基于每个语句对应的目标类别权重,确定所述待分类文本的分类结果。
另一方面,本申请提出了一种设备,所述设备包括:处理器和存储器,所述存储器中存储有至少一条指令、至少一段程序、代码集或指令集,所述至少一条指令、所述至少一段程序、所述代码集或指令集由所述处理器加载并执行以实现如上述所述的文本分类方法。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于腾讯科技(深圳)有限公司,未经腾讯科技(深圳)有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201910801743.1/2.html,转载请声明来源钻瓜专利网。
- 上一篇:一种搜索推荐方法及装置
- 下一篇:一种数据处理方法、装置及计算机存储介质