[发明专利]一种面向对等网络的可定义搜索重点的网络爬虫方法在审
申请号: | 201610563533.X | 申请日: | 2016-07-18 |
公开(公告)号: | CN106202467A | 公开(公告)日: | 2016-12-07 |
发明(设计)人: | 仇伟民;戴鸿君;于治楼 | 申请(专利权)人: | 浪潮集团有限公司 |
主分类号: | G06F17/30 | 分类号: | G06F17/30 |
代理公司: | 济南信达专利事务所有限公司 37100 | 代理人: | 杜鹃花 |
地址: | 250101 山东*** | 国省代码: | 山东;37 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | 本发明公开了一种面向对等网络的可定义搜索重点的网络爬虫方法,属于计算机网络信息检索领域,本发明要解决的技术问题为如何将对等网络和网络爬虫结合,实现可定义搜索重点的网络爬虫对特定领域和主题实现描述的难度较小而且准确度较高,采用的技术方案为:该方法是利用基于站点页面链接结构的链接导航技术来提高主题信息的抓取准确率和速度,采用易于操作的主题描述来实现高可定制性的网络爬虫,通过配置文件来实现可定制,最终构建出一个可控性强、资源消耗小、数据采集准确性高的轻量级聚焦网络爬虫,以满足P2P搜索的需求。 | ||
搜索关键词: | 一种 面向 对等 网络 可定义 搜索 重点 爬虫 方法 | ||
【主权项】:
一种面向对等网络的可定义搜索重点的网络爬虫方法,其特征在于该方法是利用基于站点页面链接结构的链接导航技术来提高主题信息的抓取准确率和速度,采用易于操作的主题描述来实现高可定制性的网络爬虫,通过配置文件来实现可定制,最终构建出一个可控性强、资源消耗小、数据采集准确性高的轻量级聚焦网络爬虫,以满足P2P搜索的需求。
下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于浪潮集团有限公司,未经浪潮集团有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/patent/201610563533.X/,转载请声明来源钻瓜专利网。