[发明专利]一种基于分布式部署的任务调度方法在审
申请号: | 202110000842.7 | 申请日: | 2021-01-05 |
公开(公告)号: | CN112559159A | 公开(公告)日: | 2021-03-26 |
发明(设计)人: | 吴新学;翁庄明;彭本;林冬霞 | 申请(专利权)人: | 广州华资软件技术有限公司 |
主分类号: | G06F9/48 | 分类号: | G06F9/48 |
代理公司: | 暂无信息 | 代理人: | 暂无信息 |
地址: | 510665 广*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | 本发明涉及一种基于分布式部署的任务调度方法,用于对大数据平台中的数据处理任务进行分布式调度和执行,实现步骤为:定义数据处理作业的执行优先级、开始时间及执行周期;根据作业的调度配置信息和历史调度信息,将作业按执行顺序依次输送至优先级作业队列;根据作业处理的数据时间范围,将作业平均分解成若干同等时间范围的子任务,分解的子任务进入任务队列;将任务队列中的子任务派发给处于空闲且健康状态良好的执行节点执行;定期询问检查任务的执行结果,并以作业为单位汇总各项子任务的执行结果形成作业执行结果。本发明通过提供一种基于分布式部署的任务调度方法,能够以一种高效、可伸缩、可监控的方式处理分布式环境下的大数据任务。 | ||
搜索关键词: | 一种 基于 分布式 部署 任务 调度 方法 | ||
【主权项】:
暂无信息
下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于广州华资软件技术有限公司,未经广州华资软件技术有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/patent/202110000842.7/,转载请声明来源钻瓜专利网。