[发明专利]分辨爬虫和CC攻击的方法、装置、电子设备及存储介质有效

专利信息
申请号: 201811397238.7 申请日: 2018-11-22
公开(公告)号: CN109547434B 公开(公告)日: 2021-01-01
发明(设计)人: 赵晨晖 申请(专利权)人: 北京知道创宇信息技术股份有限公司
主分类号: H04L29/06 分类号: H04L29/06;H04L29/08
代理公司: 北京超凡宏宇专利代理事务所(特殊普通合伙) 11463 代理人: 徐丽
地址: 100000 北京市朝阳区阜*** 国省代码: 北京;11
权利要求书: 查看更多 说明书: 查看更多
摘要:
搜索关键词: 分辨 爬虫 cc 攻击 方法 装置 电子设备 存储 介质
【权利要求书】:

1.一种分辨爬虫和CC攻击的方法,其特征在于,所述方法包括:

获取至少两个由同一用户访问的URL;

计算每两两所述URL之间的距离,得到多个距离值;

将所述多个距离值进行累加得到表征所述用户访问的离散度的距离和;

在判断所述距离和不属于预先保存的阈值范围时,确定所述用户的访问为爬虫访问或者为CC攻击;

其中,计算每两两所述URL之间的距离,包括:将待计算的每个所述URL所包括的内容按照第一预设顺序组成一个包含N个元素的数组,其中,所述数组包含一个参数元素以及至少一个字符串元素;

针对待计算的每两个所述URL所对应的两个数组,按照第二预设规则比对所述两个数组所包括的所述字符串元素以及按照第三预设规则比对所述两个数组所包括的所述参数元素,得到与所述待计算的每两个所述URL对应的比较结果数组;

根据第四预设规则,将所述比较结果数组转换成一个数值,所述数值为所述待计算的每两个所述URL之间的距离;

其中,每个所述URL包括host、path以及arguments;针对每个所述URL,将与该URL所对应的host按照排列顺序根据“.”进行拆分,得到至少一个host元素,将与该URL所对应的path按照排列顺序根据“/”进行拆分,得到至少一个path元素,将与该URL所对应的arguments根据“”进行拆分,得到arguments元素;将所述至少一个host元素、所述至少一个path元素以及所述arguments元素组成一个包含N个元素的数组其中,将所述arguments元素填入a0,形成所述参数元素,将所述至少一个host元素经过逆序排序且将所述至少一个path元素顺序排序后依次填入aN-1到a1,形成所述字符串元素。

2.根据权利要求1所述的方法,其特征在于,所述阈值范围包括阈值上限以及阈值下限,在判断所述距离和不属于预先保存的阈值范围时,确定所述用户的访问为爬虫访问或者为CC攻击,包括:

在判断所述距离和小于所述阈值下限时,确定所述用户的访问为CC攻击;

在判断所述距离和大于所述阈值上限时,确定所述用户的访问为爬虫。

3.根据权利要求1所述的方法,其特征在于,针对待计算的每两个所述URL所对应的两个数组,按照第二预设规则比对所述两个数组所包括的所述字符串元素以及按照第三预设规则比对所述两个数组所包括的所述参数元素,得到与所述待计算的每两个所述URL对应的比较结果数组,包括:

构建一个元素个数为N的比较结果数组

针对待计算的每两个所述URL所对应的两个数组以及中的字符串元素,若处于同一元素下标的两个元素相同,则将所述比较结果数组中与所述元素下标所对应的元素置0,否则置1,得到所述cN-1,cN-2,…c1

针对所述待计算的每两个所述URL所对应的两个数组中的参数元素,将所述a0与所述b0取交集后得到的个数除以所述a0与所述b0取并集后得到的个数,将得到的结果作为所述结果数组中的c0

4.根据权利要求3所述的方法,其特征在于,根据第四预设规则,将所述比较结果数组转换成一个数值,包括:

基于公式将所述比较结果数组转换成一个数值,其中,所述d为所述数值。

下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。

该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京知道创宇信息技术股份有限公司,未经北京知道创宇信息技术股份有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服

本文链接:http://www.vipzhuanli.com/pat/books/201811397238.7/1.html,转载请声明来源钻瓜专利网。

×

专利文献下载

说明:

1、专利原文基于中国国家知识产权局专利说明书;

2、支持发明专利 、实用新型专利、外观设计专利(升级中);

3、专利数据每周两次同步更新,支持Adobe PDF格式;

4、内容包括专利技术的结构示意图流程工艺图技术构造图

5、已全新升级为极速版,下载速度显著提升!欢迎使用!

请您登陆后,进行下载,点击【登陆】 【注册】

关于我们 寻求报道 投稿须知 广告合作 版权声明 网站地图 友情链接 企业标识 联系我们

钻瓜专利网在线咨询

周一至周五 9:00-18:00

咨询在线客服咨询在线客服
tel code back_top