[发明专利]一种基于数据处理的任务智能调度引擎设计方法

摘要

本发明公开了一种基于数据处理的任务智能调度引擎设计方法，包括如下步骤S1任务配置管理，S2任务执行条件管理，S3任务依赖关系管理，S4任务后续处理，S5任务执行情况监控，S6任务异常情况处理，S7查看队列中的任务，S8任务调度服务程序。本发明以自动化的方式解决电信业务支撑部门每天人工取数、数据处理的一系列繁重过程，现在通信行业三大运营商都采用数据集中存储，建立数据仓库，而各地市分公司要取数据进行分析都要到省公司的数据仓库中抽取数据，抽取数据后还需要对数据进行清洗加工，获得地市自己需要的数据再进行经营分析。

主权项

一种基于数据处理的任务智能调度引擎设计方法，其特征在于：包括如下步骤：S1：任务配置管理，定义任务并发数，配置任务属性，对新建任务定义任务优先级、任务对应的后台处理过程、执行周期等，可定义日任务、周任务、月任务、年任务及一次性任务，对周任务需指定开始时间是周几，对一次性任务需指定数据开始时间与截止时间；S2：任务执行条件管理，配置任务的执行条件，只有条件满足时任务才会被执行，可以配置任务执行的时间点、配置任务执行前进行的检查条件，只有当条件满足时任务才启动执行；S3：任务依赖关系管理，定义任务的依赖关系，一个任务可以依赖很多任务，也可以被很多任务依赖，任务只有当其所依赖的任务执行完成后才可以被执行；S4：任务后续处理，定义任务在执行后要进行的处理，如建立表的索引、进行数据完整性检查、进行数据有效性检查及数据量的比较；S5：任务执行情况监控，查看任务的执行情况，可以启动一个任务，也可以停止一个任务，下达停止任务时如果该任务正在执行，则系统会在执行完成后停止指定任务；S6：任务异常情况处理，查看任务的执行出错情况，可查看出错的语句，进行处理，处理完成后启动重做该任务；S7：查看队列中的任务，查看在队列中未执行的任务，可查看未执行的原因；S8：任务调度服务程序，任务智能调度程序，根据任务执行的条件进行检查，当条件具备时系统会自动启动执行。