[发明专利]针对短文本的数据挖掘方法及系统在审
申请号: | 201810784159.5 | 申请日: | 2018-07-17 |
公开(公告)号: | CN109947934A | 公开(公告)日: | 2019-06-28 |
发明(设计)人: | 王宇;廖桂秀;邱雪涛;万四爽;费志军;许彩燕;佘萧寒;张琦 | 申请(专利权)人: | 中国银联股份有限公司 |
主分类号: | G06F16/35 | 分类号: | G06F16/35;G06F16/335 |
代理公司: | 中国专利代理(香港)有限公司 72001 | 代理人: | 王星;杨美灵 |
地址: | 200135 上海*** | 国省代码: | 上海;31 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | 本发明涉及针对短文本的数据挖掘方法,包括:对第一短文本集合进行预处理以提取第一语料;基于第一语料来构建第一词向量模型,以使得每个短文本对应于至少一个词向量;确定多个短文本各自的词向量统计信息,利用第一聚类方法对多个短文本进行聚类以得到第一聚类结果;对每一类,确定该类中包括的至少一个短文本各自对应的至少一个词向量,并基于各词向量的词频信息来确定该类的至少一个关键词;对第一聚类结果,将至少一个关键词之间的重叠量满足第一条件的不同类进行合并。该方法能够克服聚类个数难以确定的问题,显著提升了聚类的准确性,使得聚类结果更符合技术人员预期。 | ||
搜索关键词: | 短文本 词向量 聚类 聚类结果 数据挖掘 预处理 统计信息 词频信息 第一条件 重叠量 构建 语料 集合 合并 | ||
【主权项】:
1.一种针对短文本的数据挖掘方法,包括如下步骤:a)、对第一短文本集合进行预处理以提取第一语料;其中,所述第一短文本集合包括多个短文本;b)、基于所述第一语料来构建第一词向量模型,以使得每个所述短文本对应于至少一个词向量;c)、确定所述多个短文本各自的词向量统计信息,利用第一聚类方法对所述多个短文本进行聚类以得到第一聚类结果,所述第一聚类结果中的每一类包括至少一个所述短文本;d)、对所述每一类,确定该类中包括的所述至少一个短文本各自对应的所述至少一个词向量,并基于各所述词向量的词频信息来确定该类的至少一个关键词;以及e)、对所述第一聚类结果,将所述至少一个关键词之间的重叠量满足第一条件的不同类进行合并,以形成第二聚类结果。
下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于中国银联股份有限公司,未经中国银联股份有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/patent/201810784159.5/,转载请声明来源钻瓜专利网。
- 上一篇:用于对日志进行分类的方法及装置
- 下一篇:新闻事件的生成方法及装置