[发明专利]基于数据密集型科学工作流的任务调度与虚拟机整合方法在审
申请号: | 201810465028.0 | 申请日: | 2018-05-16 |
公开(公告)号: | CN108628665A | 公开(公告)日: | 2018-10-09 |
发明(设计)人: | 熊聪聪;冯阔;赵青 | 申请(专利权)人: | 天津科技大学 |
主分类号: | G06F9/455 | 分类号: | G06F9/455;G06F9/48 |
代理公司: | 天津盛理知识产权代理有限公司 12209 | 代理人: | 王利文 |
地址: | 300222 天津市河*** | 国省代码: | 天津;12 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 工作流 任务调度 虚拟机 截止期 数据密集型 虚拟机类型 整合 数据依赖关系 有向无环图 成本优化 加权融合 任务执行 时间选择 租赁 初始化 任务包 时间片 数据量 聚类 求解 浮动 并用 | ||
1.一种基于数据密集型科学工作流的任务调度与虚拟机整合方法,其特征在于包括以下步骤:
步骤1、读取数据密集型科学工作流,构造以任务为节点、任务间的数据依赖关系为边的有向无环图DAG;
步骤2、确定工作流虚拟机:通过获取每个任务执行的确切处理时间选择出该工作流相对最适合的虚拟机,并用CPLEX方法进行虚拟机类型的求解;
步骤3、工作流截止期划分:首先将工作流按照数据量大小相似和虚拟机类型相同的任务进行聚类形成n个任务包,然后采用基于浮动区间的方法求得工作流截止期;
步骤4:初始化任务调度:在工作流截止期划分的基础上,采用基于深度的任务调度顺序方法;
步骤5、虚拟机租赁成本优化:采用加权融合新租赁时间片预期利用率的PHD方法进行任务调度。
2.根据权利要求1所述的基于数据密集型科学工作流的任务调度与虚拟机整合方法,其特征在于:所述步骤2的具体实现方法为:
设αk(k=1,2,...,N)和分别表示任务选取了第K种虚拟机以及该虚拟机的价格在截止期划分阶段,虚拟机采用的计费方式为精确计费而非按区间进行计费,E表示的是采用区间计费模式时虚拟机服务的计费区间的长度,执行任务vi在虚拟机类型α上所需要的总处理时间为Ti,α,此时任务vi在虚拟机类型α上的成本计算方式为Pi,α,Ωi,α=1代表任务vi选择的虚拟机类型α,反之Ωi,α=0,Ei表示的是执行任务vi完毕的结束时间,上述的整数规划模型表示如下:
该式表示最小化虚拟机总租赁成本;
∑α∈NΩi,α=1,1≤i≤N,该式表示每个任务只选择一种类型的虚拟机;
Ei≤Ej-∑α∈NtTi,αΩj,α,该式表示任务间的偏序约束关系;
E0≥∑α∈NT0,αΩ0,α,该式表示任务间的偏序约束关系;
Ωi,α∈{0,1},α∈M,该式表示任务是否选择某个类型的虚拟机;
EN≤D,该式表示保证工作流总执行时间满足截止期约束;
用CPLEX方法进行虚拟机类型的求解法为:设定特定比例avigap=0.25%,如果某一时刻该任务的最优解和分支限界法的下界之间的差值小于avigap,CPLEX则立刻停止执行,那么此时的最好解将被取为CPLEX的近似解并用符号θ表示,θvi表示的是任务vi在解θ中选择虚拟机的类型。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于天津科技大学,未经天津科技大学许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201810465028.0/1.html,转载请声明来源钻瓜专利网。
- 上一篇:一种容器处理的方法及装置
- 下一篇:事务的处理方法、装置、存储介质及电子装置