[发明专利]一种文本分类的控制方法有效
申请号: | 201710943645.2 | 申请日: | 2017-10-11 |
公开(公告)号: | CN107908649B | 公开(公告)日: | 2020-07-28 |
发明(设计)人: | 赵冲 | 申请(专利权)人: | 北京智慧星光信息技术有限公司 |
主分类号: | G06F16/35 | 分类号: | G06F16/35 |
代理公司: | 北京国昊天诚知识产权代理有限公司 11315 | 代理人: | 许志勇;刘昕 |
地址: | 100080 北京市海*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | 本发明公开了一种文本分类的控制方法,包括:对训练集中随机选择的待分类文档进行第一训练处理;对训练集中已筛选的待分类文档进行第二训练处理;将第一次训练处理的文本分类特征和第二次训练处理后的文本分类特征进行特征交集组合操作后,生成新的文本分类特征并纳入总体特征库中;对训练集中新增语料进行增量训练,其中按序进行第一次训练处理和第二次训练处理后,对两次训练后的文本分类特征进行特征交集组合操作生成新的文本分类特征的增量特征,同时将新的文本分类特征的增量特征纳入到总体特征库中,完成文本分类的控制。本发明解决了当前分类方法中只经过一次分类训练,导致文本分类准确率低、相似类别区分效果差、效率低的问题。 | ||
搜索关键词: | 一种 文本 分类 控制 方法 | ||
【主权项】:
一种文本分类的控制方法,包括:对训练集中随机选择的待分类文档进行第一训练处理,其中通过对各指定类别中出现的所有单词根据TF‑IDF算法计算各单词的权重值W1,并根据各单词的权重值的排序获取到第一训练处理后的文本分类特征;对训练集中已筛选的待分类文档进行第二训练处理,其中通过对各指定类别中出现的所有单词根据以下公式计算各单词的权重值W2,并根据各单词的权重值的排序获取到第二训练处理后的文本分类特征;W2=N×(A×D‑B×C)2/((A+B)×(C+D)×(A+C)×(B+D)),其中,N为训练集中已筛选的待分类文档总数;A为某指定类别中出现一单词W的文档数目;B为除该指定类别外,其他所有指定类别中出现单词W的文档数目,C为该指定类别中没有出现单词W的文档数目;D为除该指定类别外,其他所有指定类别中没有出现单词W的文档数目;将第一次训练处理的文本分类特征和第二次训练处理后的文本分类特征进行特征交集组合操作后,生成新的文本分类特征并纳入总体特征库中;对训练集中新增语料进行增量训练,其中按序进行第一次训练处理和第二次训练处理后,对两次训练后的文本分类特征进行特征交集组合操作生成新的文本分类特征的增量特征,同时将新的文本分类特征的增量特征纳入到总体特征库中,完成文本分类的控制。
下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京智慧星光信息技术有限公司,未经北京智慧星光信息技术有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/patent/201710943645.2/,转载请声明来源钻瓜专利网。