[发明专利]一种分析互联网金融海量日志的方法及系统在审
| 申请号： | 201711495499.8 | 申请日： | 2017-12-31 |
| 公开（公告）号： | CN108334556A | 公开（公告）日： | 2018-07-27 |
| 发明（设计）人： | 不公告发明人 | 申请（专利权）人： | 江苏易润信息技术有限公司 |
| 主分类号： | G06F17/30 | 分类号： | G06F17/30 |
| 代理公司： | 暂无信息 | 代理人： | 暂无信息 |
| 地址： | 212000 江苏省镇江市*** | 国省代码： | 江苏;32 |
| 权利要求书： | 查看更多 | 说明书： | 查看更多 |
| 摘要： | |||
| 搜索关键词： | 业务日志 海量日志 实时收集 采集模块 处理模块 传输模块 日志 分析 传输业务 分析系统 海量数据 监控数据 接收业务 实时计算 顺序连接 性能瓶颈 互联网 实时性 并发 金融 传输 拓展 保证 | ||
1.一种分析互联网金融海量日志的系统，其特征在于，包括顺序连接的采集模块、传输模块、以及处理模块；
其中，所述采集模块利用flume实时收集业务日志；所述传输模块利用kafka技术对所述业务日志进行传输，所述处理模块接收所述业务日志并利用storm对所述业务日志进行实时计算和分析以得到监控数据。
2.根据权利要求1所述的一种分析互联网金融海量日志的系统，其特征在于，还包括：存储 模块，连接于所述处理模块；
其中，所述存储模块包括redis存储单元，其中所述redis存储单元用于存储统计数据。
3.根据权利要求2所述的一种分析互联网金融海量日志的系统，其特征在于，所述存储模块 还包括：MySQL存储单元、以及Elasticsearch存储单元；
其中，所述MySQL存储单元用于存储规则数据；以及
所述Elasticsearch存储单元用于存储日志文本数据。
4.根据权利要求1所述的一种分析互联网金融海量日志的系统，其特征在于，所述处理模块 包括：
报警控制单元，用于根据实时计算和分析的结果生成报警反馈。
5.根据权利要求2所述的一种分析互联网金融海量日志的系统，其特征在于，还包括web展 示模块，连接于所述存储模块，所述web展示模块实时动态展示所述监控数据。
6.一种分析互联网金融海量日志的方法，其特征在于，包括：
利用flume实时收集业务日志；
利用kafka技术对所述业务日志进行传输；
接收所述业务日志并利用storm对所述业务日志进行实时计算和分析以得到监控数据。
7.根据权利要求6所述的一种分析互联网金融海量日志的方法，其特征在于，在对所述业务 日志进行实时计算和分析之后还包括：
存储统计数据。
8.根据权利要求7所述的一种分析互联网金融海量日志的方法，其特征在于，在对所述业务 日志进行实时计算和分析之后还包括：
存储规则数据；以及
存储日志文本数据。
9.根据权利要求6所述的一种分析互联网金融海量日志的方法，其特征在于，在对所述业务 日志进行实时计算和分析之后还包括：
根据实时计算和分析的结果生成报警反馈。
10.根据权利要求7所述的一种分析互联网金融海量日志的方法，其特征在于，在对所述业 务日志进行实时计算和分析之后还包括：
实时动态展示所述监控数据。
该专利技术资料仅供研究查看技术是否侵权等信息，商用须获得专利权人授权。该专利全部权利属于江苏易润信息技术有限公司，未经江苏易润信息技术有限公司许可，擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作，请联系【客服】
本文链接：http://www.vipzhuanli.com/pat/books/201711495499.8/1.html，转载请声明来源钻瓜专利网。
