[发明专利]MapReduce应用的相关参数的配置方法和装置在审
申请号: | 201410373376.7 | 申请日: | 2014-07-31 |
公开(公告)号: | CN105302536A | 公开(公告)日: | 2016-02-03 |
发明(设计)人: | 邹嘉;史巨伟;郑勇;王晨;刘杰 | 申请(专利权)人: | 国际商业机器公司 |
主分类号: | G06F9/44 | 分类号: | G06F9/44 |
代理公司: | 北京市金杜律师事务所 11256 | 代理人: | 王茂华;陈颖 |
地址: | 美国纽*** | 国省代码: | 美国;US |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | 本发明涉及分布式文件系统,其提供了一种MapReduce应用的相关参数的配置方法和装置,该方法包括:接收第一MapReduce作业的处理请求;获取历史MapReduce作业的作业特征属性;从所述历史MapReduce作业的作业特征属性中查找到与所述第一MapReduce作业相关的第二MapReduce作业的作业特征属性;以及根据所述第二MapReduce作业的作业特征属性配置所述第一MapReduce作业的相关参数。按照该参数配置方法,能够有效地降低文件传输的网络开销、尽可能实现本地化处理的MapReduce作业的参数配置方法,减少管理员配置负担的同时,有效地增加系统资源利用率。 | ||
搜索关键词: | mapreduce 应用 相关 参数 配置 方法 装置 | ||
【主权项】:
一种基于分布式文件系统的MapReduce应用的相关参数的配置方法,包括:接收第一MapReduce作业的处理请求;获取历史MapReduce作业的作业特征属性;从所述历史MapReduce作业的作业特征属性中查找到与所述第一MapReduce作业相关的第二MapReduce作业的作业特征属性;根据所述第二MapReduce作业的作业特征属性配置所述第一MapReduce作业的相关参数。
下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于国际商业机器公司,未经国际商业机器公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/patent/201410373376.7/,转载请声明来源钻瓜专利网。