[发明专利]一种数据采集系统和数据采集方法在审
| 申请号： | 201811502431.2 | 申请日： | 2018-12-07 |
| 公开（公告）号： | CN109445949A | 公开（公告）日： | 2019-03-08 |
| 发明（设计）人： | 张小庆;杨翠;李新星 | 申请（专利权）人： | 武汉轻工大学 |
| 主分类号： | G06F9/50 | 分类号： | G06F9/50;G06F16/2458;H04L29/08 |
| 代理公司： | 深圳市世纪恒程知识产权代理事务所 44287 | 代理人： | 胡海国 |
| 地址： | 430023 湖北省武*** | 国省代码： | 湖北;42 |
| 权利要求书： | 查看更多 | 说明书： | 查看更多 |
| 摘要： | 本发明公开了一种数据采集系统和数据采集方法。本发明的数据采集系统包括数据库服务器，用于存储预设配置规则信息；数据采集服务器，用于获取应用终端传输的原始信息数据，调用数据库服务器中存储的预设配置规则信息来对原始信息数据进行预处理，得到日志数据，并将日志数据推送至分布式消息系统集群；所述分布式消息系统集群接收所述数据采集层推送的日志数据。实现一个可复用的应用终端信息采集与存储系统，可顺应移动互联网时代的大数据挖掘需求痛点，让信息数据能够快速流通起来，并将数据存储在通用的大数据组件中，提供快速、吞吐量高的接口用作大数据挖掘分析，并能够满足移动互联网企业集合旗下产品的实际情况实现对数据的采集与分析。 | ||
| 搜索关键词： | 数据采集系统 日志数据 大数据 数据库服务器 预设配置规则 原始信息数据 分布式消息 移动互联网 数据采集 系统集群 应用终端 推送 存储 数据采集服务器 预处理 数据采集层 存储系统 数据存储 信息采集 信息数据 挖掘 可复用 通用的 调用 吞吐量 集合 分析 采集 传输 流通 | ||
【主权项】：
1.一种数据采集系统，其特征在于，所述系统包括：数据库服务器，用于存储预设配置规则信息；数据采集服务器，用于获取应用终端传输的原始信息数据，调用所述数据库服务器中存储的预设配置规则信息来对所述原始信息数据进行预处理，得到日志数据，并将所述日志数据推送至分布式消息系统集群；所述分布式消息系统集群，用于接收所述数据采集层推送的日志数据。
下载完整专利技术内容需要扣除积分，VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息，商用须获得专利权人授权。该专利全部权利属于武汉轻工大学，未经武汉轻工大学许可，擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作，请联系【客服】
本文链接：http://www.vipzhuanli.com/patent/201811502431.2/，转载请声明来源钻瓜专利网。
