[发明专利]一种文本分类方法、装置、设备及存储介质在审
申请号: | 201910801743.1 | 申请日: | 2019-08-28 |
公开(公告)号: | CN110597988A | 公开(公告)日: | 2019-12-20 |
发明(设计)人: | 朱斌斌;陈朝晖 | 申请(专利权)人: | 腾讯科技(深圳)有限公司 |
主分类号: | G06F16/35 | 分类号: | G06F16/35;G06F16/33;G06F17/27;G06K9/62 |
代理公司: | 44202 广州三环专利商标代理有限公司 | 代理人: | 郝传鑫;贾允 |
地址: | 518057 广东省深圳*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 语句 目标类别 目标关键词 待分类文本 分类标签 文本分类 分词 权重 关联 存储介质 分词处理 分类结果 准确率 词库 申请 匹配 文本 保留 | ||
1.一种文本分类方法,其特征在于,所述方法包括:
将待分类文本拆分为至少一个语句;
对每个语句进行分词处理,得到所述语句对应的分词;
将每个语句对应的分词与词库中不同关联深度的关键词进行匹配,得到所述语句对应的目标关键词;
确定每个语句对应的目标关键词的分类标签,将所述分类标签确定为所述语句对应的目标类别;其中,所述目标类别包括至少一个目标关键词;
基于每个语句对应的目标类别中各个目标关键词的关联深度以及所述目标类别包括的目标关键词的数量,确定所述语句对应的目标类别权重;
基于每个语句对应的目标类别权重,确定所述待分类文本的分类结果。
2.根据权利要求1所述的方法,其特征在于,所述将每个语句对应的分词与词库中不同关联深度的关键词进行匹配,得到所述语句对应的目标关键词,包括:
将每个语句对应的分词与所述词库中的一级关键词进行匹配,得到所述语句对应的一级匹配关键词;
将每个语句对应的分词与相应的一级匹配关键词的多级从属关键词进行匹配;
若所述语句对应的分词不能够与相应的一级匹配关键词的多级从属关键词进行匹配,则将所述一级匹配关键词确定为与所述语句对应的目标关键词;
若所述语句对应的分词能够与相应的一级匹配关键词的多级从属关键词进行匹配,则将匹配上的多级从属关键词确定为与所述语句对应的目标关键词;
其中,所述多级从属关键词位于以所述一级匹配关键词为父节点的层级结构中,所述关联深度表征关键词在所述层级结构中的层级。
3.根据权利要求1所述的方法,其特征在于,所述确定每个语句对应的目标关键词的分类标签,将所述分类标签确定为所述语句对应的目标类别,包括:
从所述词库中获取每个语句对应的目标关键词的分类标签;其中,所述词库包括关键词与分类标签的映射关系;
将具有相同分类标签的目标关键词归为一类,得到至少一个属于同一类别的目标关键词集合;
将所述至少一个属于同一类别的目标关键词集合确定为所述语句对应的目标类别。
4.根据权利要求1所述的方法,其特征在于,所述基于每个语句对应的目标类别中各个目标关键词的关联深度以及所述目标类别包括的目标关键词的数量,确定所述语句对应的目标类别权重,包括:
对每个语句对应的各个目标类别中的各个目标关键词按照关联深度进行降序排序,将排序最前的目标关键词确定为所述语句对应的各个目标类别的候选关键词;
基于每个语句对应的各个目标类别的候选关键词的关联深度,确定所述语句对应的各个目标类别的候选关键词权重;
基于每个语句对应的各个目标类别包括的目标关键词的数量,确定所述语句对应的各个目标类别的命中数量权重;
基于每个语句对应的各个目标类别的候选关键词权重和所述命中数量权重,确定所述语句对应的各个目标类别的权重;
对每个语句对应的各个目标类别的权重进行降序排序,将排序最前的目标类别的权重确定为所述语句对应的目标类别权重。
5.根据权利要求4所述的方法,其特征在于,所述基于每个语句对应的目标类别权重,确定所述待分类文本的分类结果,包括:
计算每个语句对应的各个目标类别的权重之和,得到所述语句对应的权重总和;
基于每个语句对应的目标类别权重以及所述语句对应的权重总和,确定所述语句对应的目标类别权重占比;
建立每个语句对应的目标类别与每个语句对应的目标类别权重占比之间的映射关系,得到所述待分类文本的分类结果。
6.根据权利要求1所述的方法,其特征在于,所述将待分类文本拆分成至少一个语句,包括:
获取所述待分类文本中的预设字符;
提取任意两个相邻的预设字符之间的文本,得到与所述待分类文本对应的至少一个语句;
其中,所述预设字符包括标点符号、分隔符或编号中的至少一种。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于腾讯科技(深圳)有限公司,未经腾讯科技(深圳)有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201910801743.1/1.html,转载请声明来源钻瓜专利网。
- 上一篇:一种搜索推荐方法及装置
- 下一篇:一种数据处理方法、装置及计算机存储介质