[发明专利]热点话题检测方法及装置有效
申请号: | 201811260532.3 | 申请日: | 2018-10-26 |
公开(公告)号: | CN109582783B | 公开(公告)日: | 2020-10-02 |
发明(设计)人: | 徐常胜;方全;李泳锡 | 申请(专利权)人: | 中国科学院自动化研究所 |
主分类号: | G06F16/35 | 分类号: | G06F16/35;G06F16/34;G06F16/36 |
代理公司: | 北京市恒有知识产权代理事务所(普通合伙) 11576 | 代理人: | 郭文浩 |
地址: | 100190 *** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 热点话题 检测 方法 装置 | ||
1.一种热点话题检测方法,其特征在于,所述方法包括:
基于预设实体知识库提取目标文本的关键句作为所述目标文本的摘要;
使用LSH算法计算所述摘要的文档指纹;
基于KNN算法对所述文档指纹进行聚类分析以确定所述目标文本的话题类别;
其中,所述预设实体知识库是基于知识图谱结构构建的知识库;
其中,“基于预设实体知识库提取目标文本的关键句作为所述目标文本的摘要”的具体步骤包括:
对所述目标文本进行分割得到若干个句子;
根据评分算法计算所述目标文本中每个句子的得分;
将每个句子按照得分进行排序,选取排名靠前的设定数量的句子作为摘要;
其中,“根据评分算法计算所述目标文本中每个句子的得分”的具体步骤包括:
按照下式计算句子的得分:
其中,α、β、γ、θ是预设的权重因子;fg是句子seqi中包含的所述实体知识库中实体的数量;seqi是所述目标文本分割后得到的句子的集合中第i个句子,也是当前待评分句子;title是所述目标文本的标题;S(title,seqi)表示句子seqi与所述目标文本的标题的相似度;集合U是预设训练集中与所述目标文本相同内容源的文本的句子的集合;sequ是所述集合U中第u个句子,S(seqi,sequ)是句子seqi与句子sequ的相似度;集合S是预设训练集中与所述目标文本不同内容源的文本的句子的集合;seqs是所述集合S中第s个句子,S(seqi,seqs)是句子seqi与句子seqs的相似度。
2.根据权利要求1所述的热点话题检测方法,其特征在于,所述方法包括:
按照下式分别计算所述S(seqi,sequ)和所述S(seqi,seqs):
其中,|{wk│wk∈titlewk∈seqi}|是在句子seqi和所述目标文本的标题中同时出现的单词数量;|{wk│wk∈seqiwk∈sequ}|是在句子seqi与句子sequ中同时出现的单词数量;|{wk│wk∈seqiwk∈seqs}|是在句子seqi与句子seqs中同时出现的单词数量;fi是句子seqi的特征向量;ft是所述目标文本的标题的特征向量;fu是句子sequ的特征向量;fs是句子seqs的特征向量;S(fi,ft)是特征向量fi与特征向量ft的相似度;S(fi,fu)是特征向量fi与特征向量fu的相似度;S(fi,fs)是特征向量fi与特征向量fs的相似度;|seqi|是句子seqi的单词数量;|title|是所述目标文本的标题的单词数量;|sequ|是句子sequ的单词数量;|seqs|是句子seqs的单词数量。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于中国科学院自动化研究所,未经中国科学院自动化研究所许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201811260532.3/1.html,转载请声明来源钻瓜专利网。
- 上一篇:一种基于用弱监督深度学习的文本聚类方法
- 下一篇:文本分类方法及装置