[发明专利]一种文本分类方法、服务器及计算机可读介质在审

专利信息
申请号: 201711498600.5 申请日: 2017-12-29
公开(公告)号: CN108170818A 公开(公告)日: 2018-06-15
发明(设计)人: 黄佳恒 申请(专利权)人: 深圳市金立通信设备有限公司
主分类号: G06F17/30 分类号: G06F17/30;G06K9/62
代理公司: 广州三环专利商标代理有限公司 44202 代理人: 郝传鑫;熊永强
地址: 518040 广东省深圳市福田*** 国省代码: 广东;44
权利要求书: 查看更多 说明书: 查看更多
摘要: 发明实施例公开了一种文本分类方法、服务器及计算机可读介质,其中方法包括:获取待分类文本,所述待分类文本包括M个词,其中,M为正整数;根据待分类文本的N个词,通过主题模型得到所述N个词中每个词对应的主题,其中,N为不大于M的正整数;根据所述N个词中每个词以及每个词对应的主题,通过主题词向量模型得到所述N个词中每个词对应的主题词向量,其中,所述主题词向量为词与词对应的主题共同的向量表示;根据所述N个词中每个词对应的主题词向量,通过分类模型得到所述待分类文本的类别;其中,所述主题模型、所述主题词向量模型、所述分类模型为已训练模型。可在考虑词的多义性的情况下,增加分类准确率并高效地进行文本分类。 1
搜索关键词: 待分类文本 文本分类 向量 计算机可读介质 分类模型 向量模型 主题模型 正整数 服务器 多义性 分类准确率 向量表示 训练模型
【主权项】:
1.一种文本分类方法,其特征在于,包括:

获取待分类文本,所述待分类文本包括M个词,其中,M为正整数;

根据待分类文本的N个词,通过主题模型得到所述N个词中每个词对应的主题,其中,N为不大于M的正整数;

根据所述N个词中每个词以及每个词对应的主题,通过主题词向量模型得到所述N个词中每个词对应的主题词向量,其中,所述主题词向量为词与词对应的主题共同的向量表示;

根据所述N个词中每个词对应的主题词向量,通过分类模型得到所述待分类文本的类别;

其中,所述主题模型、所述主题词向量模型、所述分类模型为已训练模型。

2.根据权利要求1所述的方法,其特征在于,所述获取待分类文本之后,还包括:

对所述待分类文本进行文本分词处理,得到所述待分类文本的M个词;

对所述M个词进行去停用词处理,得到所述待分类文本的N个词;

其中,所述文本分词处理使用的算法包括:正向最大匹配算法、逆向最大匹配算法、最少切分算法、结巴分词算法中的其中一个。

3.根据权利要求1所述的方法,其特征在于,所述主题模型为隐含狄利克雷分布主题模型,所述主题词向量模型为主题词嵌入模型。

4.根据权利要求3所述的方法,其特征在于,所述通过主题词向量模型得到所述N个词中每个词对应的主题词向量,具体包括:

通过主题词嵌入模型,得到所述N个词中每个词对应的词向量以及每个词对应的主题向量;

将每个词对应的词向量与每个词对应的主题向量进行拼接,得到每个词对应的主题词向量;

其中,词向量为i维向量,主题向量为j维向量,主题词向量为(i+j)维向量。

5.根据权利要求1或2所述的方法,其特征在于,所述通过主题词向量模型得到所述N个词中每个词对应的主题词向量,具体包括:

通过词向量模型,得到所述N个词中每个词对应的词向量,通过主题向量模型,得到所述N个词中每个词对应的主题向量;

将每个词对应的词向量与每个词对应的主题向量进行拼接,得到每个词对应的主题词向量;

其中,词向量为i维向量,主题向量为j维向量,主题词向量为(i+j)维向量。

6.根据权利要求1所述的方法,其特征在于,所述分类模型包括快速文本分类模型、卷积神经网络模型、长短期记忆网络模型中的其中一个。

7.根据权利要求1所述的方法,其特征在于,所述分类模型为快速文本分类模型,所述根据所述N个词中每个词对应的主题词向量,通过分类模型得到所述待分类文本的类别,具体包括:

将所述N个词的主题词向量作平均运算,得到运算结果;

根据所述运算结果,通过分类器得到所述待分类文本的类别;

其中,分类器包括:Logistic分类器、Softmax分类器的其中一个。

8.一种服务器,其特征在于,包括用于执行如权利要求1‑7任一权利要求所述的方法的单元。

9.一种服务器,其特征在于,包括处理器、输入设备、输出设备和存储器,所述处理器、输入设备、输出设备和存储器相互连接,其中,所述存储器用于存储计算机程序,所述计算机程序包括程序指令,所述处理器被配置用于调用所述程序指令,执行如权利要求1‑7任一项所述的方法。

10.一种计算机可读存储介质,其特征在于,所述计算机存储介质存储有计算机程序,所述计算机程序包括程序指令,所述程序指令当被处理器执行时使所述处理器执行如权利要求1‑7任一项所述的方法。

下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。

该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于深圳市金立通信设备有限公司,未经深圳市金立通信设备有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服

本文链接:http://www.vipzhuanli.com/patent/201711498600.5/,转载请声明来源钻瓜专利网。

×

专利文献下载

说明:

1、专利原文基于中国国家知识产权局专利说明书;

2、支持发明专利 、实用新型专利、外观设计专利(升级中);

3、专利数据每周两次同步更新,支持Adobe PDF格式;

4、内容包括专利技术的结构示意图流程工艺图技术构造图

5、已全新升级为极速版,下载速度显著提升!欢迎使用!

请您登陆后,进行下载,点击【登陆】 【注册】

关于我们 寻求报道 投稿须知 广告合作 版权声明 网站地图 友情链接 企业标识 联系我们

钻瓜专利网在线咨询

周一至周五 9:00-18:00

咨询在线客服咨询在线客服
tel code back_top