[发明专利]一种Hadoop计算存储分离方法在审
申请号: | 201710161929.6 | 申请日: | 2017-03-17 |
公开(公告)号: | CN106953910A | 公开(公告)日: | 2017-07-14 |
发明(设计)人: | 王德奎;戴雪冰;潘峰;李珂;刘安 | 申请(专利权)人: | 郑州云海信息技术有限公司 |
主分类号: | H04L29/08 | 分类号: | H04L29/08;G06F9/445 |
代理公司: | 济南舜源专利事务所有限公司37205 | 代理人: | 张亮 |
地址: | 450000 河南省郑州市*** | 国省代码: | 河南;41 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | 本发明提供一种Hadoop计算存储分离方法,包括S1在宿主机部署Kubernetes集群;S2将宿主机的数据盘格式化,并挂载到系统盘固定目录;S3命令行部署容器化的Hdfs NameNode节点和DataNode节点;S4编写Yarn部署文件,基于Kubernetes集群的PetSet特性和ConfigMap特性部署Yarn集群;S5进行Yarn集群测试。本发明将大数据存储组件和计算组件分离,将计算组件部署在Kuberentes环境,管理员可以根据业务场景的资源需求部署不同的计算组件,当大数据任务结束时,可以将计算组件删除,将不使用的资源释放,从而提高资源利用率,节省成本。 | ||
搜索关键词: | 一种 hadoop 计算 存储 分离 方法 | ||
【主权项】:
一种Hadoop计算存储分离方法,其特征在于,包括:S1:在宿主机部署Kubernetes集群;S2:将宿主机的数据盘格式化,并挂载到系统盘固定目录;S3:命令行部署容器化的Hdfs NameNode节点和DataNode节点;S4:编写Yarn部署文件,基于Kubernetes集群的PetSet特性和ConfigMap特性部署Yarn集群;S5:进行Yarn集群测试。
下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于郑州云海信息技术有限公司,未经郑州云海信息技术有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/patent/201710161929.6/,转载请声明来源钻瓜专利网。
- 上一篇:一种农业遥感器旋转升降装置
- 下一篇:一种VR拍摄无人机用的增稳云台