[发明专利]一种索引建立方法及装置有效
申请号: | 201910635949.1 | 申请日: | 2019-07-15 |
公开(公告)号: | CN110362730B | 公开(公告)日: | 2022-07-12 |
发明(设计)人: | 刘俊启 | 申请(专利权)人: | 百度在线网络技术(北京)有限公司 |
主分类号: | G06F16/951 | 分类号: | G06F16/951 |
代理公司: | 北京市铸成律师事务所 11313 | 代理人: | 杨瑾瑾;林蕾 |
地址: | 100085 北京市*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 索引 建立 方法 装置 | ||
1.一种索引建立方法,其特征在于,包括:
检测到网页访问操作;
若所述网页访问操作对应的网页满足预设的自建立索引的条件,则建立访问该网页的索引;
将所述索引存储到索引库中,所述索引包括所述网页的特征和与所述特征关联的地址信息;其中,所述索引库包括服务端索引库和客户端索引库;
接收到搜索请求;
根据所述搜索请求和所述服务端索引库中的索引,获得第一搜索结果;
根据所述搜索请求和所述客户端索引库中的索引,获得第二搜索结果;
根据所述第一搜索结果和所述第二搜索结果,获得整合的搜索结果;
展示所述整合的搜索结果;
其中,建立访问该网页的索引包括:
若所述网页访问操作对应的网页为非私有页面,且根据爬虫协议Robots允许搜索,则在所述服务端索引库建立访问该网页的所述索引;
若所述网页访问操作对应的网页为私有页面,或者所述网页访问操作对应的网页为非私有页面且根据爬虫协议Robots不允许搜索,则在客户端索引库建立访问该网页的所述索引。
2.根据权利要求1所述的方法,其特征在于,建立访问该网页的索引,包括:
提取所述网页的特征,所述特征中包括所述网页中的关键字、摘要、图片中的至少一项;
将所述特征关联所述网页的地址信息,得到访问该网页的所述索引。
3.根据权利要求1所述的方法,其特征在于,所述预设的自建立索引的条件,包括:
所述网页访问操作对应的网页不属于从搜索结果页导流打开的网页;
所述网页访问操作对应的网页为根据网页访问白名单或黑名单可访问的网页。
4.一种索引建立装置,其特征在于,包括:
操作检测模块:用于检测到网页访问操作;
索引建立模块:用于若所述网页访问操作对应的网页满足预设的自建立索引的条件,则建立访问该网页的索引;
索引存储模块:用于将所述索引存储到索引库中,所述索引包括所述网页的特征和与所述特征关联的地址信息;其中,所述索引库包括服务端索引库和客户端索引库;
搜索请求接收模块:用于接收到搜索请求;
第一搜索模块:用于根据所述搜索请求和所述服务端索引库中的索引,获得第一搜索结果;
第二搜索模块:用于根据所述搜索请求和所述客户端索引库中的索引,获得第二搜索结果;
整合模块:用于根据所述第一搜索结果和所述第二搜索结果,获得整合的搜索结果;
展示模块:用于展示所述整合的搜索结果;
其中,索引建立模块包括:
第一索引单元:用于若所述网页访问操作对应的网页为非私有页面,且根据爬虫协议Robots允许搜索,则在所述服务端索引库建立访问该网页的所述索引;
第二索引单元:用于若所述网页访问操作对应的网页为私有页面,或者所述网页访问操作对应的网页为非私有页面且根据爬虫协议Robots不允许搜索,则在客户端索引库建立访问该网页的所述索引。
5.根据权利要求4所述的装置,其特征在于,所述索引建立模块包括:
特征提取单元:用于提取所述网页的特征,所述特征中包括所述网页中的关键字、摘要、图片中的至少一项;
关联单元:用于将所述特征关联所述网页的地址信息,得到访问该网页的所述索引。
6.根据权利要求4所述的装置,其特征在于,所述预设的自建立索引的条件,包括:
所述网页访问操作对应的网页不属于从搜索结果页导流打开的网页;
所述网页访问操作对应的网页为根据网页访问白名单或黑名单可访问的网页。
7.一种索引建立设备,其特征在于,包括:
一个或多个处理器;
存储器,用于存储一个或多个程序;
当所述一个或多个程序被所述一个或多个处理器执行时,使得所述一个或多个处理器实现如权利要求1至3中任一项所述的方法。
8.一种计算机可读存储介质,其存储有计算机程序,其特征在于,该程序被处理器执行时实现如权利要求1至3中任一项所述的方法。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于百度在线网络技术(北京)有限公司,未经百度在线网络技术(北京)有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201910635949.1/1.html,转载请声明来源钻瓜专利网。