[发明专利]一种反爬虫的数据处理方法、装置、系统及存储介质在审
| 申请号： | 201811138544.9 | 申请日： | 2018-09-28 |
| 公开（公告）号： | CN110990799A | 公开（公告）日： | 2020-04-10 |
| 发明（设计）人： | 李可欣 | 申请（专利权）人： | 北京国双科技有限公司 |
| 主分类号： | G06F21/14 | 分类号： | G06F21/14;G06F8/51;G06F40/126 |
| 代理公司： | 北京集佳知识产权代理有限公司 11227 | 代理人： | 王宝筠 |
| 地址： | 100080 北京市海淀区*** | 国省代码： | 北京;11 |
| 权利要求书： | 暂无信息 | 说明书： | 暂无信息 |
| 摘要： | 本发明提供了一种反爬虫的数据处理方法、装置、系统以及存储介质，首先获取待替换展示字符及所述待替换展示字符对应的源代码；基于预先配置的常用字符与字符编码的对应关系，确定所述待替换展示字符对应的目标字符编码；将所述待替换展示字符对应的源代码替换为所述目标字符编码。这样，当爬虫对源代码进行爬取时，爬取到的是经过替换后的目标字符编码，而爬虫方并不知道预先配置的常用字符与字符编码的对应关系，因此，基于当前爬取的目标字符编码，不能解析出真实的展示字符的内容，实现了反爬。并且本反爬方法既能抑制爬虫获取网站的真实数据，又不降低非爬虫用户的操作感。 | ||
| 搜索关键词： | 一种 爬虫 数据处理 方法 装置 系统 存储 介质 | ||
【主权项】：
暂无信息
下载完整专利技术内容需要扣除积分，VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息，商用须获得专利权人授权。该专利全部权利属于北京国双科技有限公司，未经北京国双科技有限公司许可，擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作，请联系【客服】
本文链接：http://www.vipzhuanli.com/patent/201811138544.9/，转载请声明来源钻瓜专利网。
