[发明专利]一种基于任务类型的动态MapReduce 调度方法及系统在审
申请号: | 201310306360.X | 申请日: | 2013-07-19 |
公开(公告)号: | CN103365729A | 公开(公告)日: | 2013-10-23 |
发明(设计)人: | 何震宇;薛鸿杰;盛义涛;葛百根;史梦龙;胡文毅 | 申请(专利权)人: | 哈尔滨工业大学深圳研究生院 |
主分类号: | G06F9/50 | 分类号: | G06F9/50 |
代理公司: | 深圳市科吉华烽知识产权事务所(普通合伙) 44248 | 代理人: | 邓扬;于标 |
地址: | 518000 广东省深*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | 本发明提供了一种基于任务类型的动态MapReduce调度方法及系统,该基于任务类型的动态MapReduce调度方法包括如下步骤:A.进入等待队列,B.工作任务分类,C.工作任务迁移,D.工作任务调度,CPU密集型队列和I/O密集型队列分别独立调度,将工作任务调度到工作结点集群,执行任务。本发明的有益效果是本发明基于任务类型的动态MapReduce调度方法,通过对工作任务类型预测,然后为不同类型任务分别设置队列,各队列独立调度。本发明基于任务类型的动态MapReduce调度方法,提高不同类型任务环境下集群的吞吐量。 | ||
搜索关键词: | 一种 基于 任务 类型 动态 mapreduce 调度 方法 系统 | ||
【主权项】:
一种基于任务类型的动态MapReduce调度方法,其特征在于,包括如下步骤:A.进入等待队列,所有提交到工作结点集群上的工作任务都先进入等待队列,由等待队列将工作任务部分调度到工作结点集群;B.工作任务分类,根据预测机制将工作任务分为CPU密集型和I/O密集型;C.工作任务迁移,根据步骤B得到的预测结果将工作任务迁移到CPU密集型队列或I/O密集型队列;D.工作任务调度,CPU密集型队列和I/O密集型队列分别独立调度,将工作任务调度到工作结点集群,执行任务。
下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于哈尔滨工业大学深圳研究生院,未经哈尔滨工业大学深圳研究生院许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/patent/201310306360.X/,转载请声明来源钻瓜专利网。
- 上一篇:改良结构的机架一体式液压卧式千斤顶
- 下一篇:机架一体式液压卧式千斤顶