[发明专利]可视化的计算任务编排方法、装置、电子设备及存储介质

说明书

本发明涉及作业编排技术领域，提供一种可视化的计算任务编排方法、装置、电子设备及存储介质。所述方法包括：获取计算任务，根据计算任务得到业务视图，获取数据业务单元的物理部署状态，根据业务视图与物理部署状态，生成第一运行视图，判断物理部署状态是否发生变化，若检测到物理部署状态发生变化，根据第一运行视图运行计算任务；若检测到物理部署状态发生变化，获取变化后的物理部署状态，根据业务视图和变化后的物理部署状态生成第二运行视图，根据第二运行视图执行所述计算任务。本发明解决了现有技术中物理部署状态发生变化时，不能根据物理部署状态的变化自适应的生成相应的作业编排图的技术问题。

技术领域

本发明涉及大数据系统的作业编排技术领域，具体涉及一种可视化的计算任务编排方法、装置、电子设备及存储介质。

背景技术

现有技术中，在作业编排过程中，作业编排图中的一个作业节点与物理部署中的作业实例一一对应，当数据业务单元的物理部署状态发生变化时，例如出现运行环境变化或数据业务单元增加或减少等情况时，作业编排图也需要进行相应的变更，但是现有技术中作业编排图不能根据数据业务单元的物理部署状态的变化自适应进行相应的变更，极大的增加了运维的复杂度与投产风险。

发明内容

鉴于以上内容，有必要提出一种可视化的计算任务编排方法、装置、电子设备及存储介质以实现自适应数据业务单元的物理部署状态变化的可视化的计算任务编排。

本申请的第一方面提供一种可视化的计算任务编排方法，所述可视化的计算任务编排方法包括：

获取计算任务；

根据所述计算任务得到业务视图，所述业务视图展示所述计算任务中子计算任务之间的依赖关系；

获取全部数据业务单元的物理部署状态，根据所述业务视图与全部所述数据业务单元的物理部署状态，生成第一运行视图，所述数据业务单元的物理部署状态包括有计算任务状态和无计算任务状态，所述第一运行视图展示所述业务视图与所述数据业务单元之间的关系，一个数据业务单元为有计算任务状态表示该数据业务单元正在执行计算任务，一个数据业务单元为无计算任务状态表示该数据业务单元没有执行计算任务；

判断全部所述数据业务单元的物理部署状态是否发生变化；

若检测到全部所述数据业务单元的物理部署状态没有发生变化，根据所述第一运行视图执行所述计算任务；若检测到存在至少一个数据业务单元的物理部署状态发生变化，获取全部所述数据业务单元的物理部署状态，根据所述业务视图和全部所述数据业务单元的物理部署状态生成第二运行视图，根据所述第二运行视图执行所述计算任务，其中，所述第二运行视图展示所述业务视图与所述数据业务单元之间的关系。

优选地，所述根据所述计算任务得到业务视图包括：

对所述计算任务进行切分，得到至少一个所述子计算任务；

根据所述至少一个所述子计算任务之间的依赖关系得到第一业务视图，所述第一业务视图展示所述至少一个所述子计算任务之间的依赖关系；

判断所述第一业务视图是否存在缺陷；

当所述第一业务视图存在缺陷时，修改所述第一业务视图以使所述第一业务视图不存在缺陷；

当所述第一业务视图不存在缺陷时，将所述第一业务视图保存为所述业务视图。

优选地，所述业务视图包括规则业务视图或工作流业务视图，所述规则业务视图包括下一级业务视图，所述工作流业务视图不包括下一级业务视图，所述规则业务视图的下一级业务视图用于展示所述子计算任务的处理顺序。

优选地，所述根据所述业务视图与全部所述数据业务单元的物理部署状态，生成第一运行视图包括：