[发明专利]一种基于实时日志的网站威胁检测的方法及系统

摘要

本发明提供了一种基于实时日志的网站威胁检测方法，该方法包括：实时采集监控网站日志服务器的日志数据；对日志数据进行转换与实时分发；对日志数据进行实时处理与检测；对所述网站威胁检测结果进行实时展示，并根据所述检测结果的严重程度进行实时预警。本发明还提供了一种基于实时日志的网站威胁检测系统，该系统日志数据实时采集单元、日志数据实时转换与分发单元、日志数据实时处理与检测单元及日志数据实时监控单元。本发明能够提高日志数据的处理能力及时效性，提高网站威胁检测与反应的及时性，降低网站运行的风险，为网络的信息安全提供有力的保障。

主权项

1.一种基于实时日志的网站威胁检测方法，其特征在于，所述方法包括：实时采集监控网站日志服务器的日志数据；对日志数据进行转换与实时分发；对日志数据进行实时处理与检测；对所述网站威胁检测结果进行实时展示，并根据所述检测结果的严重程度进行实时预警；所述对日志数据进行转换与实时分发，包括：将采集到的日志数据转换为消息队列，分别发送给历史数据存储集群及实时计算集群；将实时采集的日志数据备份到本地的文件系统，支持对日志数据的定期清理；所述对日志数据进行实时处理与检测，包括：对日志数据进行实时清洗、加工，及特征值提取，获取规则匹配所需的关键信息项；利用网站威胁规则知识库中所包括的规则，实时对日志数据的关键信息项进行匹配；将实时匹配计算的结果保存在内存数据库中；规则知识库支持对规则的增加、删除、修改及查询的操作；利用数据挖掘的频繁挖掘算法对历史数据进行分析，获取用户的行为特征，得到新的网站威胁规则。