[发明专利]反爬虫系统及方法在审
申请号: | 201910937903.5 | 申请日: | 2019-09-29 |
公开(公告)号: | CN110677417A | 公开(公告)日: | 2020-01-10 |
发明(设计)人: | 毛琴;谢强;陈晨 | 申请(专利权)人: | 武汉极意网络科技有限公司 |
主分类号: | H04L29/06 | 分类号: | H04L29/06;H04L29/12;H04L29/08 |
代理公司: | 44287 深圳市世纪恒程知识产权代理事务所 | 代理人: | 郭春芳 |
地址: | 430000 湖北省武汉市东湖开发区大学*** | 国省代码: | 湖北;42 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | 本发明公开了一种反爬虫系统及方法。该系统包括:域名解析服务器,用于从接收到的流量请求中提取目标服务器对应的域名,根据预存的IP地址映射表,确定域名对应的反爬虫服务器集群的虚拟IP地址,并通过虚拟IP地址将流量请求发送至反爬虫服务器集群;反爬虫服务器集群,用于根据预设的恶意请求判断标准确定流量请求是否是恶意请求,并在确定流量请求是恶意请求时处理流量请求,在确定流量请求不是恶意请求时,将流量请求发送至目标服务器;目标服务器,用于在接收到反爬虫服务器集群发送的流量请求后,对流量请求进行处理。通过该方式,有效阻止了基于爬虫技术非法爬取未授权平台数据的现象,大大降低了爬虫风险对未授权平台的业务影响。 | ||
搜索关键词: | 流量请求 爬虫服务器 集群 目标服务器 虚拟IP地址 未授权 发送 域名解析服务器 标准确定 爬虫技术 爬虫系统 平台数据 请求判断 业务影响 爬虫 映射表 预存 预设 非法 | ||
【主权项】:
1.一种反爬虫系统,其特征在于,所述系统包括:域名解析服务器、反爬虫服务器集群和目标服务器;/n所述域名解析服务器,用于从接收到的流量请求中提取所述目标服务器对应的域名,根据预存的互联网协议IP地址映射表,确定所述域名对应的所述反爬虫服务器集群的虚拟IP地址,并通过所述虚拟IP地址将所述流量请求发送至所述反爬虫服务器集群,所述IP地址映射表中包括所述域名和所述虚拟IP地址之间的对应关系;/n所述反爬虫服务器集群,用于根据预设的恶意请求判断标准确定所述流量请求是否是恶意请求,并在确定所述流量请求是恶意请求时处理所述流量请求,在确定所述流量请求不是恶意请求时,将所述流量请求发送至所述目标服务器;/n所述目标服务器,用于在接收到所述反爬虫服务器集群发送的流量请求后,对所述流量请求进行处理。/n
下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于武汉极意网络科技有限公司,未经武汉极意网络科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/patent/201910937903.5/,转载请声明来源钻瓜专利网。