[发明专利]MRS集群外的电力大数据分析平台搭建方法及装置在审
申请号: | 202210024513.0 | 申请日: | 2022-01-11 |
公开(公告)号: | CN114546422A | 公开(公告)日: | 2022-05-27 |
发明(设计)人: | 欧阳文华;蒙天骐;蔡木良;安义;徐在德;戚沁雅;陈琛;刘蓓 | 申请(专利权)人: | 国网江西省电力有限公司电力科学研究院;国家电网有限公司 |
主分类号: | G06F8/61 | 分类号: | G06F8/61;G06F8/76;G06F9/455 |
代理公司: | 南昌贤达专利代理事务所(普通合伙) 36136 | 代理人: | 金一娴 |
地址: | 330000 江西省南昌市青山湖区民营科*** | 国省代码: | 江西;36 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | mrs 集群 电力 数据 分析 平台 搭建 方法 装置 | ||
1.一种MRS集群外的电力大数据分析平台搭建方法,其特征在于,包括:
根据MRS集群所部署的云环境,对电力大数据分析平台进行基础环境准备,所述基础环境准备包括操作系统的镜像选择与安装、开发运行基本环境配置以及组件安装工具配置;
将电力大数据分析平台时间与Master节点时间进行同步,所述同步包括根据命令yum-y install ntp完成电力大数据分析平台ntp服务的安装;根据命令vi/etc/ntp.conf修改ntp.conf文件中server xx.xx.xx.xx prefer,将server指向主节点,其中xx.xx.xx.xx为Mater节点时间同步服务器的IP地址;根据命令service ntpd start启动ntp服务,完成分析平台与主节点的时间同步,根据ntpstat查看时间同步状态,确认时间同步成功;
在集群外节点安装MRS集群客户端,在管理控制台创建集群用户并授予相应权限,授权用户在电力大数据分析平台登录客户端进行相互身份验证;
分析平台节点环境配置和开发环境部署,集成开发环境的安装部署。
2.根据权利要求1所述的一种MRS集群外的电力大数据分析平台搭建方法,其特征在于,在根据MRS集群所部署的云环境,对电力大数据分析平台进行基础环境准备之后,所述方法还包括:
获取电流大数据中台的数据,所述数据包括dws库数据以及hive库数据;
对所述dws库数据和所述hive库数据进行缺失值处理和噪声数据处理;
根据预设统计学方法和预设机器学习模型对处理后的所述dws库数据和/或所述hive库数据进行关联分析。
3.根据权利要求1所述的一种MRS集群外的电力大数据分析平台搭建方法,其特征在于,所述在集群外节点安装MRS集群客户端,在管理控制台创建集群用户并授予相应权限,授权用户在电力大数据分析平台登录客户端进行相互身份验证包括:
根据MRS集群的集群管理员账号在管理控制台中创建用户,并授予MRS服务对应权限,用新创建的用户登录控制台,切换至授权区域,验证权限;
在管理控制台下载MRS客户端,发送至电力大数据分析平台服务器中的指定服务器,安装完成后,切换到客户端安装目录并通过命令source bigdata_env进行环境变量配置;
根据Kerberos认证对客户端和服务器端进行双向身份认证,并通过命令kinit控制MRS集群用户进行验证。
4.根据权利要求1所述的一种MRS集群外的电力大数据分析平台搭建方法,其特征在于,所述操作系统的版本为Linux,Redhat7.6及以上。
5.一种MRS集群外的电力大数据分析平台搭建装置,其特征在于,包括:
准备模块,配置为根据MRS集群所部署的云环境,对电力大数据分析平台进行基础环境准备,所述基础环境准备包括操作系统镜像选择与安装、开发运行基本环境配置以及组件安装工具配置;
同步模块,配置为将电力大数据分析平台时间与Master节点时间进行同步,所述同步包括根据命令yum-y install ntp完成电力大数据分析平台ntp服务的安装;根据命令vi/etc/ntp.conf修改ntp.conf文件中server xx.xx.xx.xx prefer,将server指向主节点,其中xx.xx.xx.xx为Mater节点时间同步服务器的IP地址;根据命令service ntpd start启动ntp服务,完成分析平台与主节点的时间同步,根据ntpstat查看时间同步状态,确认时间同步成功;
验证模块,配置为在集群外节点安装MRS集群客户端,在管理控制台创建集群用户并授予相应权限,授权用户在电力大数据分析平台登录客户端进行相互身份验证;
集成模块,配置为分析平台节点环境配置和开发环境部署,集成开发环境的安装部署。
6.一种电子设备,其特征在于,包括:至少一个处理器,以及与所述至少一个处理器通信连接的存储器,其中,所述存储器存储有可被所述至少一个处理器执行的指令,所述指令被所述至少一个处理器执行,以使所述至少一个处理器能够执行权利要求1至4任一项所述的方法。
7.一种计算机可读存储介质,其上存储有计算机程序,其特征在于,所述程序被处理器执行时实现权利要求1至4任一项所述的方法。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于国网江西省电力有限公司电力科学研究院;国家电网有限公司,未经国网江西省电力有限公司电力科学研究院;国家电网有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202210024513.0/1.html,转载请声明来源钻瓜专利网。
- 上一篇:电动汽车退役电池分选机器人系统
- 下一篇:一种镶嵌式硬岩基质复合抗弹板
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置