[发明专利]网站监测方法、网站图谱建立方法、装置及电子设备在审
申请号: | 202011643054.1 | 申请日: | 2020-12-31 |
公开(公告)号: | CN112699280A | 公开(公告)日: | 2021-04-23 |
发明(设计)人: | 熊毅 | 申请(专利权)人: | 北京天融信网络安全技术有限公司;北京天融信科技有限公司;北京天融信软件有限公司 |
主分类号: | G06F16/901 | 分类号: | G06F16/901;G06F16/36;G06F16/951;G06F16/955;G06F16/958;G06F21/57;G06F11/00;H04L29/06 |
代理公司: | 北京超凡宏宇专利代理事务所(特殊普通合伙) 11463 | 代理人: | 余菲 |
地址: | 100000 北京*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 网站 监测 方法 图谱 建立 装置 电子设备 | ||
1.一种网站监测方法,其特征在于,包括:
获取待监测网站的预先建立的图谱数据,所述图谱数据包括界面节点;
针对每一个界面节点,判断该界面节点是否已被监测;
在确定该界面节点未被监测时,获取该界面节点所包含的最新版本的子节点;
对该子节点进行监测,并在与该子节点存在关联关系的所有界面节点中记录对该子节点的监测结果。
2.根据权利要求1所述的方法,其特征在于,针对每一个界面节点,判断该界面节点是否已被监测,包括:
依次判断每一个界面节点是否已被监测,若当前正在判断的界面节点已被检测,则判断下一个界面节点是否已被监测。
3.根据权利要求1所述的方法,其特征在于,一个所述界面节点对应一个所述待监测网站;每一个界面节点下包含的子节点包括从该界面节点对应的网站界面中爬取到的域名、链接、元素各自对应的节点。
4.根据权利要求3所述的方法,其特征在于,对该子节点进行监测,包括:
若该子节点为链接节点,则对该链接节点对应的链接信息进行链接监测;
若该子节点为域名节点,则对该域名节点对应的域名信息进行DNS监测;
若该子节点为元素节点,则对该元素节点对应的内容信息进行敏感词以及内容变更监测。
5.根据权利要求1所述的方法,其特征在于,所述方法还包括:
获取该界面节点对应的URL;
对所述URL进行漏洞检测和/或可用性检测,并将该URL的检测结果记录在该界面节点中。
6.根据权利要求1所述的方法,其特征在于,在对该子节点进行监测之后,所述方法还包括:
根据该子节点的监测结果对所述待监测网站的图谱数据进行更新。
7.一种网站图谱建立方法,其特征在于,包括:
获取待构建知识图谱的目标网址;
对所述目标网址对应的网页进行数据爬取,得到该网页对应的界面数据和所包含的网址链接,并对爬取到的网址链接对应的网页进行数据爬取,得到该网址链接对应的网页对应的界面数据和所包含的网址链接;
基于所述目标网址、爬取到的网址链接以及从各个网址对应的网页中爬取到的界面数据,建立知识图谱,其中,所述知识图谱中的一个界面节点对应一个网址,每一个界面节点下包含的子节点包括从该界面节点对应的网址的网页界面中爬取到的域名、链接、元素各自对应的节点,界面节点之间的链路方向表示从该链路方向首端的界面节点对应的网页中能获取到该链路方向末端的界面节点对应的网址。
8.根据权利要求7所述的方法,其特征在于,基于所述目标网址、爬取到的网址链接以及从各个网址对应的网页中爬取到的界面数据,建立知识图谱,包括:
建立数量与所述目标网址与爬取到的网址链接的数量之和一致的界面节点,一个网址对应一个界面节点;
针对每一个界面节点,根据从该界面节点对应的网页界面中爬取到的界面数据,建立与该界面数据的类型对应的子节点,其中,所述类型包括域名、链接、元素;
建立各个界面节点间的链路关系,得到初始知识图谱;
对所述初始知识图谱中的重复节点进行融合,得到所述知识图谱。
9.一种网站监测装置,其特征在于,包括:
获取模块,用于获取待监测网站的预先建立的图谱数据,所述图谱数据包括界面节点;
处理模块,用于针对每一个界面节点,判断该界面节点是否已被监测,在确定该界面节点未被监测时,获取该界面节点所包含的最新版本的子节点;对该子节点进行监测,并在与该子节点存在关联关系的所有界面节点中记录对该子节点的监测结果。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京天融信网络安全技术有限公司;北京天融信科技有限公司;北京天融信软件有限公司,未经北京天融信网络安全技术有限公司;北京天融信科技有限公司;北京天融信软件有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202011643054.1/1.html,转载请声明来源钻瓜专利网。
- 上一篇:用户投诉数据库扩充方法、装置及存储介质
- 下一篇:摄像光学镜头