[发明专利]基于Airflow的分布式异步任务构建、调度系统及方法有效
| 申请号： | 202010319540.1 | 申请日： | 2020-04-22 |
| 公开（公告）号： | CN111506412B | 公开（公告）日： | 2023-04-25 |
| 发明（设计）人： | 李磊;谢赟;吴新野;韩欣;樊飞 | 申请（专利权）人： | 上海德拓信息技术股份有限公司 |
| 主分类号： | G06F9/48 | 分类号： | G06F9/48;G06F9/50;G06F9/54 |
| 代理公司： | 上海中外企专利代理事务所(特殊普通合伙) 31387 | 代理人： | 孙益青 |
| 地址： | 200233 上海*** | 国省代码： | 上海;31 |
| 权利要求书： | 查看更多 | 说明书： | 查看更多 |
| 摘要： | 本发明公开了一种基于Airflow的分布式异步任务调度系统及其工作方法，该系统包括：API Server服务模块，Caster任务构建分发模块，Airflow调度平台和数据存储模块DB。API Server服务模块用于；Caster任务构建分发模块用于渲染任务脚本；Airflow调度平台包括任务调度模块Scheduler、任务执行单元Worker、任务执行单元管理模块Flower和分布式任务队列Celery和可视化任务调度管理界面WebServer；数据存储模块DB分别连接Caster任务构建分发模块和Airflow调度平台，用于存储构建分发模块Caster和Airflow调度平台运行过程中生成的数据日志。本发明能够有效提升系统的可用性、伸缩性，容错性，保证系统的负载均衡。 | ||
| 搜索关键词： | 基于 airflow 分布式 异步 任务 构建 调度 系统 方法 | ||
【主权项】：
暂无信息
下载完整专利技术内容需要扣除积分，VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息，商用须获得专利权人授权。该专利全部权利属于上海德拓信息技术股份有限公司，未经上海德拓信息技术股份有限公司许可，擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作，请联系【客服】
本文链接：http://www.vipzhuanli.com/patent/202010319540.1/，转载请声明来源钻瓜专利网。
- 上一篇：合模间隙测量机构及装置
- 下一篇：多类型能源一体化协同控制方法及装置
