[发明专利]跨IDC大数据处理架构下执行策略生成方法、装置有效
| 申请号： | 201410730141.9 | 申请日： | 2014-12-04 |
| 公开（公告）号： | CN105718479B | 公开（公告）日： | 2020-02-28 |
| 发明（设计）人： | 刘凯毅 | 申请（专利权）人： | 中国电信股份有限公司 |
| 主分类号： | G06F16/28 | 分类号： | G06F16/28;G06F9/48 |
| 代理公司： | 中国国际贸易促进委员会专利商标事务所 11038 | 代理人： | 张雷 |
| 地址： | 100033 *** | 国省代码： | 北京;11 |
| 权利要求书： | 查看更多 | 说明书： | 查看更多 |
| 摘要： | 本发明公开了一种跨IDC的大数处理架构下执行策略生成方法、装置，涉及大数据处理领域。该方法接收各个IDC集群上报的当前可用计算资源和网络传输资源；基于任务分类模型库根据任务的类型确定任务的最优执行策略，任务的最优执行策略包括任务所需计算资源和所消耗时间；根据可用资源池中的[集群可用计算资源、作业数据分布]矩阵和[各个任务所需计算资源和所消耗时间、集群可用网络资源]矩阵两两计算，获得作业的当前最优执行策略。相对于现有的方案，本申请的技术方案能在跨IDC搭建下的大数据处理平台高利用率使用计算、网络资源，能满足不同业务的服务质量要求，而且具有灵活的业务扩展能力。 | ||
| 搜索关键词： | idc 数据处理 架构 执行 策略 生成 方法 装置 | ||
【主权项】：
一种跨互联网数据中心IDC的大数处理架构下执行策略生成方法，其特征在于，包括：调度组件接收各个IDC集群上报的当前可用的计算资源和传输资源；所述调度组件接收提交的作业，所述作业包括任务、作业数据和期望输出；所述调度组件根据任务类型基于任务分类模型库确定所述任务的代表执行策略，所述任务的代表执行策略包括所述任务所需计算资源和所消耗时间；所述调度组件根据集群可用资源池中的[集群可用计算资源、作业数据分布]矩阵和[各个任务所需计算资源、和所消耗时间、集群可用网络传输资源]矩阵进行调度，获得所述作业的当前最优执行策略。
下载完整专利技术内容需要扣除积分，VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息，商用须获得专利权人授权。该专利全部权利属于中国电信股份有限公司，未经中国电信股份有限公司许可，擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作，请联系【客服】
本文链接：http://www.vipzhuanli.com/patent/201410730141.9/，转载请声明来源钻瓜专利网。
