[发明专利]网页黑词处理方法、装置、设备及存储介质有效
申请号: | 201810916872.0 | 申请日: | 2018-08-13 |
公开(公告)号: | CN109241462B | 公开(公告)日: | 2021-12-14 |
发明(设计)人: | 肖征荣;田新雪;马书惠;邴建;邢建兵 | 申请(专利权)人: | 中国联合网络通信集团有限公司 |
主分类号: | G06F16/955 | 分类号: | G06F16/955;G06F16/953 |
代理公司: | 北京同立钧成知识产权代理有限公司 11205 | 代理人: | 张子青;刘芳 |
地址: | 100033 *** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 网页 处理 方法 装置 设备 存储 介质 | ||
1.一种网页黑词处理方法,其特征在于,应用于终端设备,包括:
获取至少一个样本网页的统一资源定位符;
根据所述至少一个样本网页的统一资源定位符,获取所述至少一个样本网页的样本网页内容;
根据所述至少一个样本网页的样本网页内容,获取所述至少一个样本网页的样本网页内容中的关键词;
统计所述至少一个样本网页的样本网页内容中的关键词在恶意网页中出现的次数和在非恶意网页中出现的次数;
根据所述关键词在恶意网页中出现的次数和在非恶意网页中出现的次数,确定所述关键词对应的权重值,所述权重值表示根据所述关键词区分恶意网页和非恶意网页的难易程度;
如果所述关键词对应的权重值大于阈值,则确定所述关键词为黑词;
将所述黑词存储在所述终端设备中的第一黑词库中;
检测所述第一黑词库中被其他主机查询过的不同黑词的个数或每个黑词被其他主机查询过的次数;
当所述第一黑词库中被其他主机查询过的不同黑词的个数大于预设个数,或者所述第一黑词库中每个黑词被其他主机查询过的次数大于预设次数时,则将所述第一黑词库中的黑词迁移到其他主机中的第二黑词库中;所述第一黑词库和所述第二黑词库用于存储同一用户的不同黑词库。
2.根据权利要求1所述的方法,其特征在于,所述将所述第一黑词库中的黑词迁移到其他主机中的第二黑词库中,包括:
通过与其他主机之间的直连通道将所述第一黑词库中的黑词迁移到其他主机中的第二黑词库中。
3.一种网页黑词处理装置,其特征在于,包括:
第一获取模块,用于获取至少一个样本网页的统一资源定位符;
第二获取模块,用于根据所述至少一个样本网页的统一资源定位符,获取所述至少一个样本网页的样本网页内容;
第三获取模块,用于根据所述至少一个样本网页的样本网页内容,获取所述至少一个样本网页的样本网页内容中的关键词;
统计模块,用于统计所述至少一个样本网页的样本网页内容中的关键词在恶意网页中出现的次数和在非恶意网页中出现的次数;
确定模块,用于根据所述关键词在恶意网页中出现的次数和在非恶意网页中出现的次数,确定所述关键词对应的权重值,所述权重值表示根据所述关键词区分恶意网页和非恶意网页的难易程度;如果所述关键词对应的权重值大于阈值,则确定所述关键词为黑词;
还包括:
存储模块,用于将所述黑词存储在终端设备中的第一黑词库中;
检测模块,用于检测所述第一黑词库中被其他主机查询过的不同黑词的个数或每个黑词被其他主机查询过的次数;
存储空间释放模块,用于当所述第一黑词库中被其他主机查询过的不同黑词的个数大于预设个数,或者所述第一黑词库中每个黑词被其他主机查询过的次数大于预设次数时,则将所述第一黑词库中的黑词迁移到其他主机中的第二黑词库中;所述第一黑词库和所述第二黑词库用于存储同一用户的不同黑词库。
4.根据权利要求3所述的网页黑词处理装置,其特征在于,所述存储空间释放模块将所述第一黑词库中的黑词迁移到其他主机中的第二黑词库中时,具体用于:
通过与其他主机之间的直连通道将所述第一黑词库中的黑词迁移到其他主机中的第二黑词库中。
5.一种主机,其特征在于,包括:
存储器;
处理器;以及
计算机程序;
其中,所述计算机程序存储在所述存储器中,并被配置为由所述处理器执行以实现如权利要求1或2所述的方法。
6.一种计算机可读存储介质,其特征在于,其上存储有计算机程序,所述计算机程序被处理器执行以实现如权利要求1或2所述的方法。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于中国联合网络通信集团有限公司,未经中国联合网络通信集团有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201810916872.0/1.html,转载请声明来源钻瓜专利网。
- 上一篇:一种用户画像构建方法及装置
- 下一篇:文档的智能呈现