[发明专利]一种企业数据集成云控制台、实现方法及系统有效
申请号: | 201710339811.8 | 申请日: | 2017-05-15 |
公开(公告)号: | CN106921755B | 公开(公告)日: | 2020-04-28 |
发明(设计)人: | 林木;高冉 | 申请(专利权)人: | 浪潮软件股份有限公司 |
主分类号: | H04L29/08 | 分类号: | H04L29/08 |
代理公司: | 济南信达专利事务所有限公司 37100 | 代理人: | 孟峣 |
地址: | 250101 山东*** | 国省代码: | 山东;37 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 企业 数据 集成 控制台 实现 方法 系统 | ||
1.一种企业数据集成云控制台实现方法,基于一种企业数据集成云控制台,该企业数据集成云控制台包括以下模块:作业扩展、作业展现、作业监控、作业统计,用于实现远程控制服务器集群,完成作业任务,其特征在于,实现过程为:
步骤一、云控制台在服务器集群中组建数据采集专用集群,该数据采集专用集群包括主服务器、若干从服务器;
步骤二、为每台数据采集专用集群的服务器安装开源工具Kettle,并依次启动所有服务器;
步骤三、云控制台通过主服务器控制所有作业任务均分到从服务器中,作业扩展模块动态扩展配置数据采集专用集群,将一个作业任务指定到不同的服务器中进行协同完成,主服务器控制各从服务器协同完成数据采集工作,实时获取各服务器的网络状态、CPU使用率、进程数及磁盘空间信息,并及时预警;
作业监控模块实时获取作业任务的日志,实时监控承载采集工作的服务器,该监控的信息包括网络状态、CPU使用率、进程数及磁盘空间信息,并通过包括短信、邮件的方式进行预警通知;
作业展现模块展现目前服务器运行的所有作业信息,该作业信息包括作业描述创建时间、作业流程图以及作业执行日志信息;
作业统计模块统计整个作业任务完成情况,在所有服务器完成作业任务后,在主服务器中显示相关服务器的运行信息。
2.根据权利要求1所述的一种企业数据集成云控制台实现方法,其特征在于,云控制台中还配置有作业启停模块,用于远程控制作业任务的启停,当作业启停模块远程控制作业任务启停时,实时准确获取承载采集工作的服务器中数据采集、清洗、存储的相关信息。
3.一种企业数据集成云控制台系统,其特征在于,包括云控制台、服务器集群,其中云控制台采用权利要求1或2中所述的云控制台结构,服务器集群则由主服务器、若干从服务器组成,服务器集群中的每台服务器均安装开源工具Kettle,云控制台通过主服务器控制所有作业任务均分到从服务器中,并在所有服务器完成作业任务后,在主服务器中显示相关服务器的运行信息。
4.根据权利要求3所述的一种企业数据集成云控制台系统,其特征在于,所述服务器集群中各服务器协同完成某一作业任务,并由主服务器获取相关服务器运行信息;云控制台远程控制主服务器将分散到不同业务系统的、异构数据源中的数据抽取到临时中间层后,进行清洗、转换、集成,最后装载到数据仓库中或者数据集市中,所述数据包括关系数据、平面数据文件。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于浪潮软件股份有限公司,未经浪潮软件股份有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201710339811.8/1.html,转载请声明来源钻瓜专利网。
- 上一篇:一种航海用的红外夜视仪
- 下一篇:一种自助清理的无线网络监控摄像头
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置