[发明专利]网页黑词处理方法、装置、设备及存储介质有效
申请号: | 201810916872.0 | 申请日: | 2018-08-13 |
公开(公告)号: | CN109241462B | 公开(公告)日: | 2021-12-14 |
发明(设计)人: | 肖征荣;田新雪;马书惠;邴建;邢建兵 | 申请(专利权)人: | 中国联合网络通信集团有限公司 |
主分类号: | G06F16/955 | 分类号: | G06F16/955;G06F16/953 |
代理公司: | 北京同立钧成知识产权代理有限公司 11205 | 代理人: | 张子青;刘芳 |
地址: | 100033 *** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 网页 处理 方法 装置 设备 存储 介质 | ||
本发明实施例提供一种网页黑词处理方法、装置、设备及存储介质。该方法包括:获取至少一个样本网页的统一资源定位符;根据所述至少一个样本网页的统一资源定位符,获取所述至少一个样本网页的样本网页内容;根据所述至少一个样本网页的样本网页内容,获取所述至少一个样本网页的样本网页内容中的关键词;统计所述至少一个样本网页的样本网页内容中的关键词在恶意网页中出现的次数和在非恶意网页中出现的次数;根据所述关键词在恶意网页中出现的次数和在非恶意网页中出现的次数,确定所述关键词为黑词或非黑词。本发明实施例提高了对黑词检测的准确性。
技术领域
本发明实施例涉及通信技术领域,尤其涉及一种网页黑词处理方法、装置、设备及存储介质。
背景技术
随着互联网的发展,人们使用互联网的频率越来越高,并利用互联网进行各种购物或者社交活动,如聊天、看视频等。互联网也致力于给人们带来更加方便的生活体验,使得生活更加舒适。但是,在这份舒适方便的生活环境中隐藏这巨大的风险,一旦网站存在漏洞,就可能被攻击者利用,攻击者可能在网站上挂马或者发布虚假信息诱使消费者上当受骗。攻击者也会制作低成本的网页来模仿其他权威网站来欺骗消费者,比如模仿银行的官方网站来套取用户的账号密码。
在基于文本的恶意网址检测模型中,常见的方法是提取页面中的关键词,将页面提取后得到的所有关键词转变成词向量,使用得到的词向量作为这个页面的标示,然后将词向量应用到不同的方法的分类模型中进行模型训练,这种基于文本的恶意网址检测方法比较简单,而随着恶意网站和检测方的不断对抗,关键词提取方法得到的关键词常常是恶意网址有意注入的正常词汇。因此,这种基于关键词提取算法的方法的效果越来越差。
发明内容
本发明实施例提供一种网页黑词处理方法、装置、设备及存储介质,以提高对黑词检测的准确性。
第一方面,本发明实施例提供一种网页黑词处理方法,包括:
获取至少一个样本网页的统一资源定位符;
根据所述至少一个样本网页的统一资源定位符,获取所述至少一个样本网页的样本网页内容;
根据所述至少一个样本网页的样本网页内容,获取所述至少一个样本网页的样本网页内容中的关键词;
统计所述至少一个样本网页的样本网页内容中的关键词在恶意网页中出现的次数和在非恶意网页中出现的次数;
根据所述关键词在恶意网页中出现的次数和在非恶意网页中出现的次数,确定所述关键词为黑词或非黑词。
第二方面,本发明实施例提供一种网页黑词处理装置,包括:
第一获取模块,用于获取至少一个样本网页的统一资源定位符;
第二获取模块,用于根据所述至少一个样本网页的统一资源定位符,获取所述至少一个样本网页的样本网页内容;
第三获取模块,用于根据所述至少一个样本网页的样本网页内容,获取所述至少一个样本网页的样本网页内容中的关键词;
统计模块,用于统计所述至少一个样本网页的样本网页内容中的关键词在恶意网页中出现的次数和在非恶意网页中出现的次数;
确定模块,用于根据所述关键词在恶意网页中出现的次数和在非恶意网页中出现的次数,确定所述关键词为黑词或非黑词。
第三方面,本发明实施例提供一种主机,包括:
存储器;
处理器;以及
计算机程序;
其中,所述计算机程序存储在所述存储器中,并被配置为由所述处理器执行以实现第一方面所述的方法。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于中国联合网络通信集团有限公司,未经中国联合网络通信集团有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201810916872.0/2.html,转载请声明来源钻瓜专利网。
- 上一篇:一种用户画像构建方法及装置
- 下一篇:文档的智能呈现