[发明专利]MRS集群外的电力大数据分析平台搭建方法及装置

说明书

本发明公开一种MRS集群外的电力大数据分析平台搭建方法及装置，方法包括：根据MRS集群所部署的云环境，对电力大数据分析平台进行基础环境准备；将电力大数据分析平台时间与Master节点时间进行同步；在集群外节点安装MRS集群客户端，在管理控制台创建集群用户并授予相应权限，授权用户在电力大数据分析平台登录客户端进行相互身份验证；分析平台节点环境配置和开发环境部署，集成开发环境的安装部署。采用该方法搭建的分析平台是通用的、可复制的，并且可以用Docker容器打包成镜像直接在其他集群外节点使用，开发人员通过该方法能够快速实现数据中台所有资源访问能力，无需进行繁琐的环境部署，降低学习、开发成本。

技术领域

本发明属于电力技术领域，尤其涉及一种MRS集群外的电力大数据分析平台搭建方法及装置。

背景技术

电力大数据是国家电网有限公司抢抓数字新基建机遇，推动电网数字化转型的重要手段。公司及各省电力公司均已建成数据中台，数据中台几乎汇集了公司内包括设备、运行、人资等各领域的所有数据并搭建了MRS集群。电网数据的管理模式为统一管理、按需申请，即公司统一存储、运维中台数据，各分公司按照各自需要向数据中台管理部门申请访问相应的数据表。

数据中台运维管理部门只负责存储、运维、管理数据，即当数据使用人员提出访问申请时，向用户赋予相应表的访问权限，不负责使用人员的数据接入、数据表访问、数据开发环境部署工作；另一方面，由于数据中台的数据存储结构复杂，既有存储在传统关系型数据库PostgresSql中的数据，又有存储在Hadoop分布式文件系统HDFS(Hadoop DistributedFile System)中的数据，且各基层单位访问均处在数据中台的大数据集群外，需要在集群外部署服务客户端、配置环境、身份认证、数据开发困难重重，这也是制约基层单位开展大数据分析的工作的主要困难。

发明内容

本发明提供一种MRS集群外的电力大数据分析平台搭建方法及装置，用于至少解决上述技术问题之一。

第一方面，本发明提供一种MRS集群外的电力大数据分析平台搭建方法，包括：根据MRS集群所部署的云环境，对电力大数据分析平台进行基础环境准备，所述基础环境准备包括操作系统的镜像选择与安装、开发运行基本环境配置以及组件安装工具配置；将电力大数据分析平台时间与Master节点时间进行同步，所述同步包括根据命令yum-y installntp完成电力大数据分析平台ntp服务的安装；根据命令vi/etc/ntp.conf修改ntp.conf文件中server xx.xx.xx.xx prefer，将server指向主节点，其中xx.xx.xx.xx为Mater节点时间同步服务器的IP地址；根据命令service ntpd start启动ntp服务，完成分析平台与主节点的时间同步，根据ntpstat查看时间同步状态，确认时间同步成功；在集群外节点安装MRS集群客户端，在管理控制台创建集群用户并授予相应权限，授权用户在电力大数据分析平台登录客户端进行相互身份验证；分析平台节点环境配置和开发环境部署，集成开发环境的安装部署。