[发明专利]数据处理方法及系统在审
申请号: | 201911418966.6 | 申请日: | 2019-12-31 |
公开(公告)号: | CN113127061A | 公开(公告)日: | 2021-07-16 |
发明(设计)人: | 刘晓辉;李振博;李欣杰 | 申请(专利权)人: | 奇安信科技集团股份有限公司;网神信息技术(北京)股份有限公司 |
主分类号: | G06F9/30 | 分类号: | G06F9/30;G06F9/48 |
代理公司: | 北京英特普罗知识产权代理有限公司 11015 | 代理人: | 邓应山 |
地址: | 100088 北京市西城区*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 数据处理 方法 系统 | ||
1.一种数据处理方法,其特征在于,包括:
获取数据处理指令对应的处理工作流,所述处理工作流包括多个工作任务节点,所述工作任务节点包括至少一个数据输入节点、至少一个数据中间节点和至少一个数据输出节点;
根据所述处理工作流的所述工作任务节点生成拓扑图;
获取待处理数据,基于所述拓扑图执行所述工作任务节点对应的工作任务,以对所述待处理数据进行处理。
2.根据权利要求1所述的数据处理方法,其特征在于,所述方法还包括:
预设数据处理指令的触发时间;
在满足所述触发时间时触发所述数据处理指令。
3.根据权利要求2所述的数据处理方法,其特征在于:配置所述数据处理指令与所述处理工作流的映射关系;
对应的,所述获取数据处理指令对应的处理工作流具体包括:
根据所述映射关系获取所述数据处理指令对应的处理工作流。
4.根据权利要求1或2所述的数据处理方法,其特征在于,所述数据处理方法还包括:
接收新的数据处理指令;
获取所述新的数据处理指令的新处理工作流;
对比所述新处理工作流的工作任务节点与所述处理工作流的所述工作任务节点,以对所述拓扑图进行第一更新,生成新的拓扑图。
5.根据权利要求4所述的数据处理方法,其特征在于,所述对比新处理工作流与所述处理工作流的所述工作任务节点,以对所述拓扑图进行第一更新,生成新的拓扑图包括:
根据所述新处理工作流的工作任务节点与所述处理工作流的所述工作任务节点,确定所述拓扑图中待处理的目标工作任务节点;
通过所述新处理工作流对所述目标工作任务节点进行修改操作,确定所述目标工作任务节点之间的连接关系,以生成新的拓扑图。
6.根据权利要求5所述的数据处理方法,其特征在于,所述获取待处理数据,基于所述拓扑图执行所述工作任务节点对应的工作任务,以对所述待处理数据进行处理包括:
接收所述工作任务节点在执行对应的工作任务过程中产生的业务数据;
根据所述业务数据,获取所述工作任务节点的执行状态;
根据所述工作任务节点的执行状态对所述拓扑图进行第二更新。
7.根据权利要求1所述的数据处理方法,其特征在于,所述根据所述处理工作流的所述工作任务节点生成拓扑图包括:
基于所述工作任务节点之间的数据处理逻辑关系生成所述拓扑图;
将所述拓扑图展示在工作任务节点管理界面上。
8.一种数据处理系统,其特征在于,包括:
工作流获取模块,用于获取数据处理指令对应的处理工作流,所述处理工作流包括多个工作任务节点,所述工作任务节点至少一个数据输入节点、至少一个数据中间节点和至少一个数据输出节点;
拓扑图生成模块,用于根据所述处理工作流的所述工作任务节点生成拓扑图;
工作任务节点执行模块,用于获取待处理数据,基于所述拓扑图执行所述工作任务节点对应的工作任务,以对所述待处理数据进行处理。
9.一种计算机设备,所述计算机设备包括存储器、处理器以及存储在所述存储器上并可在所述处理器上运行的计算机程序,其特征在于,所述处理器执行所述计算机程序时实现如权利要求1至7任一项所述的数据处理方法的步骤。
10.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质内存储有计算机程序,所述计算机程序可被至少一个处理器所执行,以使所述至少一个处理器执行如权利要求1至7中任一项所述的数据处理方法的步骤。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于奇安信科技集团股份有限公司;网神信息技术(北京)股份有限公司,未经奇安信科技集团股份有限公司;网神信息技术(北京)股份有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201911418966.6/1.html,转载请声明来源钻瓜专利网。