[发明专利]网络爬虫检测方法和装置在审
申请号: | 201210312492.9 | 申请日: | 2012-08-29 |
公开(公告)号: | CN103631830A | 公开(公告)日: | 2014-03-12 |
发明(设计)人: | 蒋武;李世光;曾祥禄 | 申请(专利权)人: | 华为技术有限公司 |
主分类号: | G06F17/30 | 分类号: | G06F17/30 |
代理公司: | 北京同立钧成知识产权代理有限公司 11205 | 代理人: | 刘芳 |
地址: | 518129 广东*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | 发明实施例提供一种网络爬虫检测方法和装置,该方法包括:获取客户端访问网页中所包含的各统一资源定位符URL路径信息;根据所述网页的URL多插树结构以及所述URL路径信息,确定所述客户端访问网页的行为特征信息;根据所述行为特征信息,确定所述客户端的访问行为是否是网络爬虫。本发明实施例通过确定客户端访问网页的行为特征信息,并判断该行为特征信息是否符合网络爬虫的行为特征信息,从而确定客户端的访问是否是网络爬虫,可以提高网络爬虫检测的准确率。 | ||
搜索关键词: | 网络 爬虫 检测 方法 装置 | ||
【主权项】:
一种网络爬虫检测方法,其特征在于,包括:获取客户端访问网页中所包含的各统一资源定位符URL路径信息;根据所述网页的URL多插树结构以及所述URL路径信息,确定所述客户端访问网页的行为特征信息;根据所述行为特征信息,确定所述客户端的访问行为是否是网络爬虫。
下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于华为技术有限公司,未经华为技术有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/patent/201210312492.9/,转载请声明来源钻瓜专利网。
- 上一篇:一种叶轮机械用冷油器设备
- 下一篇:垃圾收集箱及垃圾运输系统