[发明专利]爬虫处理方法、装置、服务器及计算机可读存储介质在审
| 申请号： | 201910965767.0 | 申请日： | 2019-10-12 |
| 公开（公告）号： | CN110851681A | 公开（公告）日： | 2020-02-28 |
| 发明（设计）人： | 杜晓宇 | 申请（专利权）人： | 平安科技（深圳）有限公司 |
| 主分类号： | G06F16/951 | 分类号： | G06F16/951 |
| 代理公司： | 广州三环专利商标代理有限公司 44202 | 代理人： | 郝传鑫;熊永强 |
| 地址： | 518000 广东省深圳市福田区福*** | 国省代码： | 广东;44 |
| 权利要求书： | 查看更多 | 说明书： | 查看更多 |
| 摘要： | 本申请实施例提供了一种爬虫处理方法、装置、服务器及计算机可读存储介质，该方法包括：接收终端发送的对指定抓取任务的任务启动指令，该任务启动指令包括该指定抓取任务的第一配置记录、第二配置记录、第三配置记录；根据第一配置记录包括的种子信息和该第二配置记录包括的针对该指示至少一类待抓取页面中每类待抓取页面的爬虫配置信息执行爬虫操作，得到该每类待抓取页面对应的爬虫数据集合；根据第三配置记录包括的每类待抓取页面对应的解析规则，从该每类待抓取页面对应的爬虫数据集合包括的各页面中解析出目标数据。采用本申请，可以使得爬虫过程更具针对性，并可以提高可扩展性，提升爬虫效率。 | ||
| 搜索关键词： | 爬虫 处理 方法 装置 服务器 计算机 可读 存储 介质 | ||
【主权项】：
暂无信息
下载完整专利技术内容需要扣除积分，VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息，商用须获得专利权人授权。该专利全部权利属于平安科技（深圳）有限公司，未经平安科技（深圳）有限公司许可，擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作，请联系【客服】
本文链接：http://www.vipzhuanli.com/patent/201910965767.0/，转载请声明来源钻瓜专利网。
