[发明专利]一种Hadoop集群的在线最小化总完工时间的调度方法和装置在审
申请号: | 201410635768.6 | 申请日: | 2014-11-11 |
公开(公告)号: | CN105653357A | 公开(公告)日: | 2016-06-08 |
发明(设计)人: | 田文洪;李国忠;蒋亚秋;徐敏贤 | 申请(专利权)人: | 田文洪;李国忠;蒋亚秋;徐敏贤 |
主分类号: | G06F9/48 | 分类号: | G06F9/48 |
代理公司: | 暂无信息 | 代理人: | 暂无信息 |
地址: | 611731 四川省成*** | 国省代码: | 四川;51 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | 本发明实施例公开了一种在线Hadoop集群调度管理的方法和装置,涉及集群调度领域。所述方法包括步骤:计算出到达在线作业的Map和Reduce阶段的持续时间(在线作业持续到达,直到全部在线作业到达);为每个在线作业分配系统可用的最大资源;将新的结果提交给调度系统;系统分配给任务所需的重新计算的MapReduce资源数量,进行任务处理。本发明适用于对在线Hadoop集群节点的动态调度管理,且在每个在线作业的执行期间,为其分配系统最大的可用资源,进而能够最小化在线总完工时间。 | ||
搜索关键词: | 一种 hadoop 集群 在线 最小化 完工 时间 调度 方法 装置 | ||
【主权项】:
一种Hadoop集群在线调度管理的方法,其特征在于,所述方法包括步骤:计算出已到达在线作业的Map和Reduce阶段的持续时间;为每个在线作业分配系统可用的最大资源;按照先来先服务的执行顺序调度在线作业。
下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于田文洪;李国忠;蒋亚秋;徐敏贤,未经田文洪;李国忠;蒋亚秋;徐敏贤许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/patent/201410635768.6/,转载请声明来源钻瓜专利网。