[发明专利]互联网金融海量日志的分析系统及方法在审
| 申请号： | 201710373303.1 | 申请日： | 2017-05-24 |
| 公开（公告）号： | CN107357804A | 公开（公告）日： | 2017-11-17 |
| 发明（设计）人： | 冯普超 | 申请（专利权）人： | 上海你我贷互联网金融信息服务有限公司 |
| 主分类号： | G06F17/30 | 分类号： | G06F17/30;G06Q40/02 |
| 代理公司： | 北京德恒律治知识产权代理有限公司11409 | 代理人： | 章社杲,卢军峰 |
| 地址： | 200941 上海市宝*** | 国省代码： | 上海;31 |
| 权利要求书： | 查看更多 | 说明书： | 查看更多 |
| 摘要： | |||
| 搜索关键词： | 互联网 金融 海量 日志 分析 系统 方法 | ||
1.一种互联网金融海量日志的分析系统，其特征在于，包括顺序连接的采集模块、传输模块、以及处理模块；
其中，所述采集模块利用flume实时收集业务日志；所述传输模块利用kafka技术对所述业务日志进行传输，所述处理模块接收所述业务日志并利用storm对所述业务日志进行实时计算和分析以得到监控数据。
2.根据权利要求1所述的互联网金融海量日志的分析系统，其特征在于，还包括：存储模块，连接于所述处理模块；
其中，所述存储模块包括redis存储单元，其中所述redis存储单元用于存储统计数据。
3.根据权利要求2所述的互联网金融海量日志的分析系统，其特征在于，所述存储模块还包括：MySQL存储单元、以及Elasticsearch存储单元；
其中，所述MySQL存储单元用于存储规则数据；以及
所述Elasticsearch存储单元用于存储日志文本数据。
4.根据权利要求1所述的互联网金融海量日志的分析系统，其特征在于，所述处理模块包括：
报警控制单元，用于根据实时计算和分析的结果生成报警反馈。
5.根据权利要求2所述的互联网金融海量日志的分析系统，其特征在于，还包括web展示模块，连接于所述存储模块，所述web展示模块实时动态展示所述监控数据。
6.一种互联网金融海量日志的分析方法，其特征在于，包括：
利用flume实时收集业务日志；
利用kafka技术对所述业务日志进行传输；
接收所述业务日志并利用storm对所述业务日志进行实时计算和分析以得到监控数据。
7.根据权利要求6所述的互联网金融海量日志的分析方法，其特征在于，在对所述业务日志进行实时计算和分析之后还包括：
存储统计数据。
8.根据权利要求7所述的互联网金融海量日志的分析方法，其特征在于，在对所述业务日志进行实时计算和分析之后还包括：
存储规则数据；以及
存储日志文本数据。
9.根据权利要求6所述的互联网金融海量日志的分析方法，其特征在于，在对所述业务日志进行实时计算和分析之后还包括：
根据实时计算和分析的结果生成报警反馈。
10.根据权利要求7所述的互联网金融海量日志的分析方法，其特征在于，在对所述业务日志进行实时计算和分析之后还包括：
实时动态展示所述监控数据。
该专利技术资料仅供研究查看技术是否侵权等信息，商用须获得专利权人授权。该专利全部权利属于上海你我贷互联网金融信息服务有限公司，未经上海你我贷互联网金融信息服务有限公司许可，擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作，请联系【客服】
本文链接：http://www.vipzhuanli.com/pat/books/201710373303.1/1.html，转载请声明来源钻瓜专利网。
