[发明专利]基于消息队列的定时任务管理系统及分配方法有效

专利信息
申请号: 201910830502.X 申请日: 2019-09-04
公开(公告)号: CN110532114B 公开(公告)日: 2022-06-14
发明(设计)人: 王大帅;邵士雨;于昊;高传集 申请(专利权)人: 浪潮云信息技术股份公司
主分类号: G06F9/54 分类号: G06F9/54
代理公司: 济南信达专利事务所有限公司 37100 代理人: 孙园园
地址: 250100 山东省济南市高*** 国省代码: 山东;37
权利要求书: 查看更多 说明书: 查看更多
摘要:
搜索关键词: 基于 消息 队列 定时 任务 管理 系统 分配 方法
【权利要求书】:

1.基于消息队列的定时任务管理系统,其特征在于包括:

执行器,所述执行器共多种,每种执行器至少一个,执行器为创建于对应程序内的进程,用于注册、修改、删除以及执行定时任务;

消息队列,所述消息队列共多个,每个消息队列对应于一种执行器,用于将定时任务传送至对应的执行器;

节点,所述节点为一个组件,用于将定时任务分配至消息队列;

数据库,所述数据库内创建有任务表和节点表,任务表用于存储定时任务信息,节点表用于存储节点信息;定时任务信息包括名称、执行周期、执行器组标识和任务内容,节点信息包括节点ID和节点时间戳,所述节点时间戳用于标识节点访问数据库的时间;

节点共多个,节点为通过去中心化设计的一个组件,节点内配置定时任务分配算法,通过该算法实现将定时任务分配至消息队列,分配算法的原理为:节点每隔一段时间访问数据库,查询需要分配给所述节点、并通过所述节点下发至消息队列的定时任务,并且在对应触发时间,将未执行的定时任务按照执行器标识发送到不同消息队列中,发送成功后更新该定时任务的上次执行时间戳;

执行器监听对应的消息队列,当定时任务下发到消息队列后,消息队列对应的任一执行器将会接收并执行到该定时任务,执行器执行失败,会给消息队列发送失败消息,当一个消息发送一定时间后没有收到成功或者失败的消息,消息队列将该定时任务设置为失败,失败的定时任务会被重发,重发超过一定次数会进入待定的失败队列,并告警;

所述定时任务管理系统用于通过如下步骤进行定时任务分配:

通过节点定时访问节点表,判断节点表中每个节点为死亡节点还是存活节点,标记每个死亡节点,并统计所有存活节点的数量;

将与死亡节点相应的定时任务进行标记抹除,所述与死亡节点相应的定时任务变为无主定时任务;

基于定时任务的数量以及存活节点的数量,为存活节点重新分配定时任务,重新分配定时任务时,每个存活节点对应的应分配定时任务数量为:

应分配定时任务数量=所有定时任务的数量/所有存活节点的数量。

2.根据权利要求1所述的基于消息队列的定时任务管理系统,其特征在于还包括前端展示界面,用于从数据库获取定时任务信息和节点信息,并展示和监控定时任务信息和节点信息,并用于向数据库插入定时任务。

3.根据权利要求1或2所述的基于消息队列的定时任务管理系统,其特征在于所述定时任务信息持久化存储于数据库的任务信息表中。

4.基于消息队列的定时任务分配方法,其特征在于应用于如权利要求1-3任一项所述的基于消息队列的定时任务管理系统,所述分配方法包括:

通过节点定时访问节点表,判断节点表中每个节点为死亡节点还是存活节点,标记每个死亡节点,并统计所有存活节点的数量;

将与死亡节点相应的定时任务进行标记抹除,所述与死亡节点相应的定时任务变为无主定时任务;

基于定时任务的数量以及存活节点的数量,为存活节点重新分配定时任务,重新分配定时任务时,每个存活节点对应的应分配定时任务数量为:

应分配定时任务数量=所有定时任务的数量/所有存活节点的数量;

访问节点表的节点为访问节点,基于定时任务的数量以及存活节点的数量,为存活节点重新分配定时任务,包括:

如果访问节点对应的应分配定时任务数量小于其已经拥有的定时任务数量,将所述无主定时任务分配至所述访问节点,直到所述访问节点拥有的定时任务数量等于其应分配定时任务数量;

如果访问节点对应的应分配定时任务数量大于已拥有定时任务数量,计算每个已拥有定时任务的执行时间与当前时间的间隔时间,其间隔时间大于阈值的已拥有定时任务作为待抹除定时任务,按照间隔时间由大至小的顺序、依次对待抹除定时任务进行标记抹除并变为无主定时任务,直至所述访问节点当前拥有的定时任务数量等于应分配定时任务的数量,或者,直至所有待抹除定时任务均变为无主定时任务;

通过如下方法判断节点表中每个节点为死亡节点还是存活节点:

查询节点表中每个节点对应的节点时间戳,如果节点时间戳与当前时间之间的间隔时间大于阈值,判定所述节点为死亡节点,如果节点时间戳与当前时间之间的间隔时间小于或等于阈值,判定所述节点为存活节点。

下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。

该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于浪潮云信息技术股份公司,未经浪潮云信息技术股份公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服

本文链接:http://www.vipzhuanli.com/pat/books/201910830502.X/1.html,转载请声明来源钻瓜专利网。

×

专利文献下载

说明:

1、专利原文基于中国国家知识产权局专利说明书;

2、支持发明专利 、实用新型专利、外观设计专利(升级中);

3、专利数据每周两次同步更新,支持Adobe PDF格式;

4、内容包括专利技术的结构示意图流程工艺图技术构造图

5、已全新升级为极速版,下载速度显著提升!欢迎使用!

请您登陆后,进行下载,点击【登陆】 【注册】

关于我们 寻求报道 投稿须知 广告合作 版权声明 网站地图 友情链接 企业标识 联系我们

钻瓜专利网在线咨询

周一至周五 9:00-18:00

咨询在线客服咨询在线客服
tel code back_top