[发明专利]检索方法有效
申请号: | 201510229773.1 | 申请日: | 2015-05-07 |
公开(公告)号: | CN104794238B | 公开(公告)日: | 2018-04-27 |
发明(设计)人: | 张孝;李睿;于翌睎;王珊 | 申请(专利权)人: | 中国人民大学 |
主分类号: | G06F17/30 | 分类号: | G06F17/30 |
代理公司: | 北京同立钧成知识产权代理有限公司11205 | 代理人: | 张洋,黄健 |
地址: | 100872 北京市海淀*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 检索 方法 | ||
1.一种检索方法,其特征在于,包括:
获取页面的时间间隔信息与关键字信息;
根据所述时间间隔信息与所述关键字信息构建TriI索引;
根据所述TriI索引计算待查询的关键字的相关度分数;
根据预设规则获得与所述相关度分数对应的页面,将所述相关度分数对应的页面作为检索结果;
所述根据所述TriI索引计算待查询的关键字的相关度分数,包括:
根据所述TriI索引确定所述待查询的关键字的类型;所述关键字的类型包括频繁关键字和非频繁关键字;
计算确定类型后的所述待查询的关键字的相关度分数。
2.根据权利要求1所述的方法,其特征在于,所述根据预设规则获得与所述相关度分数对应的页面,具体包括:
根据TIKQ算法获得所述相关度分数最高的前k位各自对应的页面,其中,k为自然数。
3.根据权利要求1所述的方法,其特征在于,所述TriI索引包括关键字匹配表,所述关键字匹配表用于存储所述关键字、所述关键字的标识符、所述关键字的页面数以及关键字列表的存储结构。
4.根据权利要求3所述的方法,其特征在于,所述关键字列表的存储结构包括:聚合线段树和分布式文件系统HDFS块文件;
其中,所述聚合线段树用于存储所述频繁关键字,所述聚合线段树的树节点还存储所述频繁关键字的标识符以及所述频繁关键字的权重;
所述HDFS块文件用于存储所述非频繁关键字,所述HDFS块文件中还存储所述非频繁关键字的标识符和所述非频繁关键字在页面中的余弦相似度。
5.根据权利要求1-4任一项所述的方法,其特征在于,所述相关度分数包括时间间隔相似度δ(p.i,q.i)和关键字相似度θ(p.d,q.d);
所述相关度分数为:
其中,α为查询偏好率,α∈[0,1],用于权衡所述时间间隔相似度和关键字相似度的相对影响;p.i为页面的时间间隔范围;q.i为查询的时间间隔范围;p.d为页面的关键字集合;q.d为查询的关键字集合。
6.根据权利要求5所述的方法,其特征在于,所述时间间隔相似度δ(p.i,q.i)为:δ(p.i,q.i)∈[0,1];
其中,|p.i∩q.i|为所述时间间隔交集的长度;|p.i∪q.i|为所述时间间隔并集的长度。
7.根据权利要求5所述的方法,其特征在于,所述关键字相似度θ(p.d,q.d)为:
其中,ωt,p.d=1+ln(ft,p.d);ft,p.d为所述页面的关键字集合p.d中关键字t的频率,ωt,q.d=ln(1+idft,D),idft,D为页面集合D中所述关键字t的独特性;dft,D为所述页面集合D中包含所述关键字t的页面个数。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于中国人民大学,未经中国人民大学许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201510229773.1/1.html,转载请声明来源钻瓜专利网。
- 上一篇:一种基于情绪倾向性的新闻分类方法及系统
- 下一篇:网页信息处理方法及装置