[发明专利]网络爬虫的识别方法及系统有效
申请号: | 201610134556.9 | 申请日: | 2016-03-09 |
公开(公告)号: | CN105577701B | 公开(公告)日: | 2018-11-09 |
发明(设计)人: | 崔广宇;李巍 | 申请(专利权)人: | 携程计算机技术(上海)有限公司 |
主分类号: | H04L29/06 | 分类号: | H04L29/06 |
代理公司: | 上海弼兴律师事务所 31283 | 代理人: | 薛琦;王聪 |
地址: | 200335 上海市*** | 国省代码: | 上海;31 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | 本发明公开了一种网络爬虫的识别方法及系统,该识别方法包括:客户端将预设URL链接的请求发送至服务器;服务器根据请求生成一第一密钥值,并将加密后的第一密钥值以及生成的JS解密脚本发送至客户端;客户端根据加密后的第一密钥值和JS解密脚本生成第二密钥值,并将其发送至服务器;服务器判断是否存在与第二密钥值相同的第一密钥值,若否,则确定客户端对应的用户为网络爬虫。与现有技术相比,本发明可以使得网络爬虫在首次访问服务器时就将其识别出来,无需进行大量访问频率的检测,节约了CPU资源,提高了识别效率。同时,无需对不同URL链接的请求进行第一密钥值的储存,大大节约了服务器的存储空间。 | ||
搜索关键词: | 网络 爬虫 识别 方法 系统 | ||
【主权项】:
1.一种网络爬虫的识别方法,其特征在于,包括以下步骤:S1、客户端将一预设URL链接的请求发送至服务器;S2、该服务器根据该预设URL链接的请求生成一第一密钥值,在对该第一密钥值进行加密的过程中生成一JS解密脚本,并将加密后的第一密钥值以及该JS解密脚本发送至该客户端,其中,该JS解密脚本用于对该加密后的第一密钥值进行解密;S3、该客户端根据该加密后的第一密钥值和该JS解密脚本生成一第二密钥值,并将该第二密钥值发送至该服务器;S4、该服务器判断是否存在与该第二密钥值相同的第一密钥值,若否,则确定该客户端对应的用户为网络爬虫;其中,第一密钥值和第二密钥值均为利用随机函数产生的伪随机值。
下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于携程计算机技术(上海)有限公司,未经携程计算机技术(上海)有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/patent/201610134556.9/,转载请声明来源钻瓜专利网。