[发明专利]网页内容安全实时监测方法

摘要

本发明提供网页内容安全实时监测方法，用于解决局限于静态网页，无法对含有海量的动态数据页面进行监测的问题。其中方法包括步骤：根据预设的目标网址、以及预设的抓取时间或抓取频率，通过部署在分布式系统上的网站爬虫工具抓取目标网页，获得网页文件；对网页文件进行安全性分析。上述方法无需在服务器上安装客户端，能够透明接入客户网络环境，易于部署，系统内包含任务调度和监视模块，只需简单的配置网站的首页及基本参数即可启动监测。极大的降低了实施维护成本。

主权项

网页内容安全实时监测系统，其特征在于，包括任务调度模块、监控模块、分析引擎模块；任务调度模块、监控模块部署于分布式系统的一个第一节点上；所述任务调度模块用于将需要抓取的目标网址，以及预设的抓取时间或抓取频率分配给各分析引擎模块；所述监控模块用于监控分析引擎模块执行分析任务的状态和资源占用情况，以及任务状态和资源占用情况上报任务调度模块；多个分析引擎模块分别部署在不同的分布式系统的第二节点上；分析引擎模块用于抓取目标网页，获得网页文件，对网页文件进行安全性分析；第一节点连接第二节点。