[发明专利]一种数据处理系统在审
申请号: | 201810004876.1 | 申请日: | 2018-01-03 |
公开(公告)号: | CN108228830A | 公开(公告)日: | 2018-06-29 |
发明(设计)人: | 蔡念;刘广聪 | 申请(专利权)人: | 广东工业大学 |
主分类号: | G06F17/30 | 分类号: | G06F17/30;G06F21/60;G06F21/62;G06F11/14;G06F11/30;G06F11/32 |
代理公司: | 北京集佳知识产权代理有限公司 11227 | 代理人: | 罗满 |
地址: | 510006 广东省*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | 本发明公开了一种数据处理系统,包括:数据采集模块用于根据预设数据采集方式,获取原始数据,数据治理模块用于对原始数据进行修正,获得目标数据,存储检索模块用于将目标数据以分布式存储方式存入预设一体化异构数据库中,并对外提供检测服务,实时计算模块用于基于Spark Stream对实时流数据进行计算,挖掘计算模块用于基于预设的算法模型对目标数据进行计算,科研实践模块用于创建图形化的大数据科研平台,统一API模块用于整合各类型异构的数据库的接口,和对接第三方BI开发工具,数据安全模块用于在存储目标数据之前,对目标数据进行加密和/或备份,运维模块用于进行事故预测和事故发生后进行追踪。可有效利用教育大数据。 | ||
搜索关键词: | 目标数据 数据处理系统 原始数据 大数据 预设 分布式存储方式 存储目标数据 数据安全模块 数据采集模块 异构数据库 采集方式 存储检索 计算模块 开发工具 科研实践 实时计算 事故发生 事故预测 数据治理 算法模型 预设数据 第三方 实时流 图形化 备份 异构 运维 整合 加密 数据库 追踪 修正 一体化 挖掘 检测 创建 科研 统一 服务 教育 | ||
【主权项】:
1.一种数据处理系统,其特征在于,包括:数据采集模块,用于根据预设数据采集方式,获取原始数据;数据治理模块,用于对所述原始数据进行修正,获得目标数据;存储检索模块,用于将所述目标数据以分布式存储方式存入预设一体化异构数据库中,并对外提供检测服务;实时计算模块,用于基于Spark Stream对实时流数据进行计算;挖掘计算模块,用于基于预设的算法模型对所述目标数据进行计算;科研实践模块,用于创建图形化的大数据科研平台;统一API模块,用于整合各类型异构的数据库的接口,和对接第三方BI开发工具;数据安全模块,用于在存储所述目标数据之前,对所述目标数据进行加密和/或备份;运维模块,用于进行事故预测和事故发生后进行追踪。
下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于广东工业大学,未经广东工业大学许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/patent/201810004876.1/,转载请声明来源钻瓜专利网。
- 上一篇:用于生成信息的方法和装置
- 下一篇:一种智能音乐推荐系统