[发明专利]一种基于定时调度的采集任务智能分配方法及系统

说明书

本发明公开了一种基于定时调度的采集任务智能分配方法及系统，方法包括以下步骤：S1：用户配置cron表达式参数；S2：系统根据参数计算时间区域内合理的出发时间点进行分配；以cron表达式的格式进行配置；S3：给每个采集任务匹配一个cron表达式；S4：将所有任务都自动分配好定时调度的时间；系统包括采集任务调度管理模块、cron配置模块和数据库；当分配cron表达式开始执行时，采集任务调度管理模块通过批量配置cron表达式的工具类对数据进行处理，并通过JDBC与SQL结合的方式对数据库进行修改。本发明大幅度减少了用户的操作，只需要配置一些简单的采集配置信息，就可以实现定时调度任务按照参数的设置自动分配匹配。

技术领域

本发明涉及数据集成领域，尤其涉及一种基于定时调度的采集任务智能分配方法及系统。

背景技术

计划任务是指在约定的时间执行已经计划好的工作任务，这是表面的意思。在Linux中，我们经常用到 cron 服务器来完成这项工作。cron服务器可以根据配置文件约定的时间来执行特定的任务。在Linux系统中，计划任务一般是由cron承担，我们可以把cron设置为开机时自动启动。cron启动后，它会读取它的所有配置文件（全局性配置文件/etc/crontab，以及每个用户的计划任务配置文件），然后cron会根据命令和执行时间来按时来调用度工作任务。

当前许多系统需要定时任务主要表现在内部系统依赖其他系统，随着信息化的日渐发展，在数据中蕴含的价值逐渐被人们所挖掘发现，数据集成中的数据采集成了目前最热门的话题之一，其中配置定时调度任务完成自动化采集更是重中之重。专利号CN202010662872.X，公开了一种可配置的定时任务调度方法及系统，对任务进行定时调度；但是仅仅只是对cron进行基础的配置，其cron配置的方式较为繁琐，需要一批一批的人工配置，流程复杂，工作量大，耗时长。

发明内容

本发明的目的在于克服现有技术的不足，提供一种基于定时调度的采集任务智能分配方法及系统。

本发明的目的是通过以下技术方案来实现的：

一种基于定时调度的采集任务智能分配方法，包括以下步骤：

S1：用户配置cron表达式参数；

S2：系统根据参数计算时间区域内合理的出发时间点进行分配；以cron表达式的格式进行处理；

S3：给每个采集任务匹配一个cron表达式；

S4：将所有任务都自动分配好定时调度的时间。

进一步的，所述S1中用户配置的cron表达式参数包括起初时间、结束时间、不同组定时任务的时间间隔、同组的最大执行任务数以及总任务数。

进一步的，所述S2包括以下子步骤：

S201：系统获取相关参数信息；

S202：根据分配组数n、时间间隔和起初结束时间参数计算时间区间是否合理；然后，判断最大执行任务数和总任务数的关系；

S203：若总任务数小于或等于最大执行任务数，则将任务分配在同一时刻执行调度；

S204：若总任务数大于最大任务数，则前n-1组按照时间间隔参数分配最大执行任务数的调度任务，第n组按照时间间隔计算在最后一个时间点分配剩余任务；

S205：将分配结果格式转换为cron表达式格式；

S206：以cron表达式作为参数在数据库中进行修改。

进一步的，所述分配组数n=总任务数/最大执行任务数+1。