[发明专利]一种爬虫行为识别方法和装置有效
申请号: | 201710008321.X | 申请日: | 2017-01-05 |
公开(公告)号: | CN108282443B | 公开(公告)日: | 2021-04-23 |
发明(设计)人: | 张毅;李晓晴 | 申请(专利权)人: | 阿里巴巴集团控股有限公司 |
主分类号: | H04L29/06 | 分类号: | H04L29/06 |
代理公司: | 北京安信方达知识产权代理有限公司 11262 | 代理人: | 李红爽;栗若木 |
地址: | 英属开曼群岛大开*** | 国省代码: | 暂无信息 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 爬虫 行为 识别 方法 装置 | ||
1.一种爬虫行为识别方法,其特征在于,包括:
校验请求浏览目标页面的浏览器的窗口信息是否满足预设条件,当所述窗口信息满足预设条件时,则校验成功,允许用户浏览目标页面,当所述窗口信息不满足预设条件时,则校验失败,认定本次请求为爬虫行为;所述窗口信息包括窗口的位置和窗口的大小;
跳转到目标页面后,验证所述目标页面的登录信息和校验时间信息,包括:
校验用户输入的用户名和密码,并校验服务器发送给浏览器请求的时间和浏览器向服务器回复请求的时间差是否满足预设阈值;当所述登录信息和所述校验时间信息都验证通过时,授权本次请求;当所述登录信息或所述校验时间信息至少之一验证不通过时,认定本次请求为爬虫行为。
2.如权利要求1所述的方法,其特征在于:所述方法之前还包括:
对请求浏览的目标页面进行登录验证,当登录验证成功时,则允许用户浏览目标页面,当登录验证不成功时,跳转至登录页面。
3.如权利要求1所述的方法,其特征在于:校验本次请求浏览目标页面的浏览器的窗口信息是否满足预设条件包括:
校验请求浏览的目标页面的浏览器窗口的长度信息和宽度是否大于或者等于预设窗口大小,并验证请求浏览的目标页面的浏览器窗口的位置信息是否处于预设范围。
4.如权利要求1所述的方法,其特征在于:验证所述目标页面的登录信息和校验时间信息之后还包括:
校验所述目标页面对应的浏览器信息,所述浏览器信息包括浏览器的类型和浏览器内核版本,当所述浏览器信息验证通过时,授权本次请求;当所述浏览器信息验证不通过时,认定本次请求为爬虫行为。
5.一种爬虫行为识别装置,其特征在于:包括:
窗口校验模块,设置为校验请求浏览目标页面的浏览器的窗口信息是否满足预设条件,当所述窗口信息满足预设条件时,则校验成功,允许用户浏览目标页面,当所述窗口信息不满足预设条件时,则校验失败,认定本次请求为爬虫行为;所述窗口信息包括窗口的位置和窗口的大小;
浏览器校验模块,设置为验证所述目标页面的登录信息和校验时间信息,包括:
校验用户输入的用户名和密码,并校验服务器发送给浏览器请求的时间和浏览器向服务器回复请求的时间差是否满足预设阈值; 当所述登录信息和所述校验时间信息都验证通过时,授权本次请求;当所述登录信息或所述校验时间信息至少之一验证不通过时,认定本次请求为爬虫行为。
6.如权利要求5所述的装置,其特征在于:还包括:
登录验证模块,设置为对本次请求浏览目标页面进行登录验证,当登录验证成功时,则允许用户访问浏览目标页面,当登录验证不成功时,跳转至登录页面。
7.如权利要求5所述的装置,其特征在于:所述窗口校验模块校验本次请求浏览目标页面的浏览器的窗口信息是否满足预设条件是指:
校验请求浏览的目标页面的浏览器窗口的长度信息和宽度是否大于或者等于预设窗口大小,并验证请求浏览的目标页面的浏览器窗口的位置信息是否处于预设范围。
8.如权利要求5所述的装置,其特征在于:浏览器校验模块还设置为:
校验所述目标页面对应的浏览器信息,所述浏览器信息包括浏览器的类型和浏览器内核版本,当所述浏览器信息验证通过时,授权本次请求;当所述浏览器信息验证不通过时,认定本次请求为爬虫行为。
9.一种爬虫行为识别装置,其特征在于,包括:存储器和处理器;
所述存储器,用于存放爬虫行为识别的程序;
所述处理器,执行爬虫行为识别的程序时,执行以下操作:
校验本次请求浏览目标页面的浏览器的窗口信息是否满足范围条件,当所述窗口信息满足范围条件,则校验成功,允许用户浏览目标页面,当所述窗口信息不满足范围条件,则校验失败,认定本次请求为爬虫行为;所述窗口信息包括窗口的位置和窗口的大小;
跳转到目标页面后,验证所述目标页面的登录信息和校验时间信息,包括:
校验用户输入的用户名和密码,并校验服务器发送给浏览器请求的时间和浏览器向服务器回复请求的时间差是否满足预设阈值;当所述登录信息和所述校验时间信息都验证通过时,授权本次请求;当所述登录信息或所述校验时间信息至少之一验证不通过时,认定本次请求为爬虫行为。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于阿里巴巴集团控股有限公司,未经阿里巴巴集团控股有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201710008321.X/1.html,转载请声明来源钻瓜专利网。