[发明专利]基于MapReduce框架下的海量文本快速聚类的方法有效
申请号: | 202011051536.8 | 申请日: | 2020-09-29 |
公开(公告)号: | CN112463958B | 公开(公告)日: | 2022-07-15 |
发明(设计)人: | 程永龙;李美晶 | 申请(专利权)人: | 上海海事大学 |
主分类号: | G06F16/35 | 分类号: | G06F16/35;G06F16/33;G06F40/284;G06K9/62;G06Q40/06 |
代理公司: | 上海互顺专利代理事务所(普通合伙) 31332 | 代理人: | 成秋丽 |
地址: | 201306 上海市*** | 国省代码: | 上海;31 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | 本发明提出一种基于MapReduce框架下的海量文本快速聚类的方法。本发明是利用Hadoop框架并采用改进后的K均值聚类算法对海量文本数据实现快速聚类的方法,该方法包括对文本数据进行预处理;利用TF‑IDF(词频‑逆文件频率)技术对文本数据进行特征提取;使用改进的K均值聚类算法。本发明针对在大数据环境下对海量文本进行聚类效率低下的问题,提出一种改进的K均值聚类算法与并行化运算的模型,使得文本聚类过程快速收敛,提高了计算效率,实现快速聚类效果。 | ||
搜索关键词: | 基于 mapreduce 框架 海量 文本 快速 方法 | ||
【主权项】:
暂无信息
下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于上海海事大学,未经上海海事大学许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/patent/202011051536.8/,转载请声明来源钻瓜专利网。
- 上一篇:一种预应力筋应力检测方法
- 下一篇:一种360°滚筒分拣机