[发明专利]一种关键词抽取效果评估方法在审
申请号: | 201911282391.X | 申请日: | 2019-12-13 |
公开(公告)号: | CN111061879A | 公开(公告)日: | 2020-04-24 |
发明(设计)人: | 贾显伏;张文斌;曾俊瑀;周建行 | 申请(专利权)人: | 云孚科技(北京)有限公司 |
主分类号: | G06F16/35 | 分类号: | G06F16/35 |
代理公司: | 北京世誉鑫诚专利代理事务所(普通合伙) 11368 | 代理人: | 任欣生 |
地址: | 100085 北京市*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 关键词 抽取 效果 评估 方法 | ||
1.一种关键词抽取效果评估方法,其特征在于,包括:
随机抽取分类语料的n个关键词并利用聚类算法,对所述n个关键词进行聚类,得到第一聚类结果,其中,n为大于零的自然数;
利用词向量生成模型,得到所述标签文件的词向量集并从所述词向量集中随机抽取n个词向量,利用聚类算法,对所述n个词向量进行聚类,得到第二聚类结果;
利用公式分别计算第一聚类结果的熵值E1及第二聚类结果的熵值E2,其中,Pj为第一聚类结果或第二聚类结果成员属于类j的概率,m为第一聚类结果或第二聚类结果成员的个数,mj为第一聚类结果或第二聚类结果成员属于类j的个数,L为第一聚类结果或第二聚类结果的类别个数;
根据公式E=E2-E1,计算本次关键词抽取结果的评估值并根据所述评估值,判断本次关键词抽取效果的好坏。
2.根据权利要求1所述的关键词抽取效果评估方法,其特征在于,所述方法还包括:
比较熵值E1及E2的大小,如果E1≥E2,则确定本次关键词抽取结果无效,如果E1E2,则确定本次关键词抽取结果有效。
3.根据权利要求1所述的关键词抽取效果评估方法,其特征在于,所述第一聚类结果与第二聚类结果的类别个数相同。
4.根据权利要求1所述的关键词抽取效果评估方法,其特征在于,所述词向量生成模型为word2vec模型。
5.根据权利要求1所述的关键词抽取效果评估方法,其特征在于,所述聚类算法为K均值聚类算法。
6.一种计算机设备,包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序,其特征在于,所述处理器执行所述计算机程序时实现如权利要求1所述的步骤。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于云孚科技(北京)有限公司,未经云孚科技(北京)有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201911282391.X/1.html,转载请声明来源钻瓜专利网。