[发明专利]一种跨平台的大数据资源管理系统及方法在审
申请号: | 202110630405.3 | 申请日: | 2021-06-07 |
公开(公告)号: | CN113515377A | 公开(公告)日: | 2021-10-19 |
发明(设计)人: | 那鹏;李许;石荷;董健;吕言抒 | 申请(专利权)人: | 广发银行股份有限公司 |
主分类号: | G06F9/50 | 分类号: | G06F9/50 |
代理公司: | 广州三环专利商标代理有限公司 44202 | 代理人: | 陈旭红;钟文瀚 |
地址: | 510080 广东*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 平台 数据 资源管理 系统 方法 | ||
1.一种跨平台的大数据资源管理系统,其特征在于,包括:应用系统接口模块、资源管理模块、资源监控模块、集群接口模块、数据存储模块;其中;
所述应用系统接口模块,用于接收应用系统发送的资源请求,在判断所述资源请求合法时,将所述资源请求发送至所述资源管理模块;其中,所述资源请求包括:新增租户请求、数据目录或数据库表授权请求、新增集群用户请求、新增集群请求;
所述资源管理模块,用于根据所述资源请求的类型选择接收所述资源请求的资源管理子模板,并将所述资源请求发送至集群接口模块;其中,所述资源管理子模板包括:租户管理子模板、授权管理子模板、用户管理子模板、集群管理子模板;
所述集群接口模块,用于根据所述资源请求的类型将所述资源请求转发至对应的Hadoop集群,并将所述资源请求发送至资源监控模块;
所述资源监控模块,用于在预设时间内根据所述资源请求的类型选择资源监控子模块以获取所述Hadoop集群的使用数据,并将所述Hadoop集群的使用数据发送至所述数据存储模块中进行存储;其中,所述资源监控子模块包括:集群监控子模块、租户监控子模块、应用监控子模块、库表监控子模块;
所述数据存储模块,用于存储所述Hadoop集群的使用数据。
2.如权利要求1所述的一种跨平台的大数据资源管理系统,其特征在于,还包括:规则引擎模块,用于提供资源请求合法性判断规则给所述应用接口模块,以判断资所述源请求合法性;还用于提供资源请求的类型判断规则给所述资源管理模块和资源监控模块,以判断所述资源请求的类型。
3.如权利要求1所述的一种跨平台的大数据资源管理系统,其特征在于,
所述租户管理子模板,用于接收所述新增租户请求,在租户管理中增加租户的配置信息;
所述授权管理子模板,用于接收所述数据目录或数据库表授权请求,在授权管理中的树形结构查询到被授权目标,通过多选的方式分配读、写、执行和继承的权限;
所述用户管理子模板,用于接收所述新增集群用户请求,在用户管理中增加用户的配置信息;其中,所述配置信息包括:用户名、用户类型、角色、用户组信息;
所述集群管理子模板,用于接收所述新增集群请求,在集群管理中增加集群的配置信息,其中,所述配置信息包括:集群名称、集群类别、IP地址、端口、用户名、密码信息。
4.如权利要求1所述的一种跨平台的大数据资源管理系统,其特征在于,
所述集群监控子模块,用于获取并监控整个集群的平均的CPU信息、内存信息、网络IO信息以及存储空间信息;
所述租户监控子模块,用于获取并监控租户的CPU信息、存储空间的使用信息;
所述应用监控子模块,用于获取并监控提交到应用的CPU和内容使用信息、运行时长信息;
所述库表监控子模块,用于获取并监控数据库和数据表的访问信息。
5.如权利要求1所述的一种跨平台的大数据资源管理系统,其特征在于,还包括:平台管理模块,用于管理平台的管理配置;其中,所述管理配置包括用户、组织、权限、审计、参数配置和准入管理。
6.如权利要求1所述的一种跨平台的大数据资源管理系统,其特征在于,还包括:调度引擎模块,用于管理资源监控模块进行监控信息获取。
7.如权利要求1所述的一种跨平台的大数据资源管理系统,其特征在于,还包括:WEB服务模块,用于用户交互。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于广发银行股份有限公司,未经广发银行股份有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202110630405.3/1.html,转载请声明来源钻瓜专利网。
- 上一篇:履带快速安装设备
- 下一篇:一种环境因子变化相互关系的研究方法
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置