[发明专利]目标主题智能抓取方法、系统及计算机可读存储介质在审
申请号: | 201710385603.1 | 申请日: | 2017-05-26 |
公开(公告)号: | CN107133217A | 公开(公告)日: | 2017-09-05 |
发明(设计)人: | 张程伟;刘顺峰 | 申请(专利权)人: | 北京惠商之星网络科技有限公司 |
主分类号: | G06F17/27 | 分类号: | G06F17/27;G06F17/30 |
代理公司: | 北京思创大成知识产权代理有限公司11614 | 代理人: | 张清芳 |
地址: | 100142 北京市海淀区*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | 公开了一种目标主题智能抓取方法、系统及计算机可读存储介质。该方法可以包括调度中心从数据库中读取待匹配搜索的目标主题,通过调度算法分配给多个队列;多个分析器同时从对应的多个队列中获取等待分析的目标主题,并进行关键词提取,获得关键词;多个分析器同时将关键词应用到对应的多个互联网站点的搜索界面进行搜索,将获得的搜索结果返回给调度中心;以及调度中心分析搜索结果,保存最终的搜索结果,其中,多个分析器与多个队列一一对应。本发明通过分布式的搜索,实现高效稳定的目标主题的智能抓取。 | ||
搜索关键词: | 目标 主题 智能 抓取 方法 系统 计算机 可读 存储 介质 | ||
【主权项】:
一种目标主题智能抓取方法,包括:调度中心从数据库中读取待匹配搜索的目标主题,通过调度算法分配给多个队列;多个分析器同时从对应的所述多个队列中获取等待分析的所述目标主题,并进行关键词提取,获得所述关键词;多个分析器同时将所述关键词应用到对应的多个互联网站点的搜索界面进行搜索,将获得的搜索结果返回给调度中心;以及调度中心分析所述搜索结果,保存最终的搜索结果,其中,所述多个分析器与所述多个队列一一对应。
下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京惠商之星网络科技有限公司,未经北京惠商之星网络科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/patent/201710385603.1/,转载请声明来源钻瓜专利网。