[发明专利]任务创建方法、装置、存储介质及电子设备在审
申请号: | 201910667753.0 | 申请日: | 2019-07-23 |
公开(公告)号: | CN110457023A | 公开(公告)日: | 2019-11-15 |
发明(设计)人: | 唐亮 | 申请(专利权)人: | 东软集团股份有限公司 |
主分类号: | G06F8/30 | 分类号: | G06F8/30;G06F8/41 |
代理公司: | 11447 北京英创嘉友知识产权代理事务所(普通合伙) | 代理人: | 曾尧<国际申请>=<国际公布>=<进入国 |
地址: | 110179辽*** | 国省代码: | 辽宁;21 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 数据处理 数据命令 配置项 创建 编译 存储介质 电子设备 任务创建 引擎 语言 | ||
本公开涉及一种任务创建方法、装置、存储介质及电子设备,以提供一种新的创建数据处理任务的方法,从而更加高效的创建数据处理任务。该方法包括:获取用户输入的配置项,所述配置项包括用于创建数据处理任务的数据命令;通过领域特定语言DSL引擎对所述配置项包括的数据命令进行编译;如果对所述数据命令的编译结果正确,则创建所述数据处理任务。
技术领域
本公开涉及计算机技术领域,具体地,涉及一种任务创建方法、装置、存储介质及电子设备。
背景技术
随着大数据时代的来临,网站日志、用户行为数据、社交媒体、传感器等等在云端产生了海量非结构化数据。与传统数据相比,海量的非结构化数据具有数据量大、价值密度低、数据关联更加复杂等特点。因此,如何创建数据处理任务,以适应海量非结构化数据的生成,是需要关注的问题。
相关技术中,通常是有针对性的编写创建数据处理任务的程序,此种方式要求具备一定技术能力与经验的软件工程师来编写程序,技术门槛高,并且编写的程序多是一次性使用,不具有推广复用的能力。另外,相关技术也可以在独立的控制台进行配置来创建数据处理任务,相较于专业编程,此种方式的使用门槛得到了降低,但是仍然需要学习专业性配置的方法。
发明内容
本公开的目的是提供一种任务创建方法、装置、存储介质及电子设备,以提供一种新的创建数据处理任务的方法。
为了实现上述目的,第一方面,本公开提供一种任务创建方法,所述方法包括:
获取用户输入的配置项,所述配置项包括用于创建数据处理任务的数据命令;
通过领域特定语言DSL引擎对所述配置项包括的数据命令进行编译;
如果对所述数据命令的编译结果正确,则创建所述数据处理任务。
可选地,所述通过领域特定语言DSL引擎对所述数据命令进行编译,包括:
获取预先存储的与所述数据命令相关的数据的属性信息,所述属性信息包括所述数据的数据源信息和权限信息;
根据所述数据源信息,从对应数据源获取与所述数据命令相关的数据;
根据所述权限信息,对获取到的数据执行所述数据命令;
所述如果对所述数据命令的编译结果正确,则创建所述数据处理任务,包括:
如果所述数据命令执行成功,则创建所述数据处理任务。
可选地,所述方法还包括:
获取所述用户通过图形用户界面GUI输入的配置项,所述配置项包括待存储数据的属性参数;
根据所述配置项包括的属性参数,生成所述待存储数据的属性信息;
按照预设数据格式,将所述待存储数据以及所述待存储数据的属性信息进行存储。
可选地,所述配置项还包括用于创建数据处理任务的资源配置信息和宏命令,所述创建所述数据处理任务,包括:
根据所述配置项包括的资源配置信息和宏命令,创建所述数据处理任务。
可选地,所述配置项还包括用于指示所述数据处理任务执行方式的调度参数,所述方法还包括:
根据所述配置项包括的调度参数,生成调度信息;
根据所述调度信息,确定所述数据处理任务的执行方式;
按照所述执行方式,执行所述数据处理任务。
可选地,所述方法还包括:
响应于用户通过图形用户界面GUI输入的日志查看指令,获取与所述数据处理任务对应的任务日志;
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于东软集团股份有限公司,未经东软集团股份有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201910667753.0/2.html,转载请声明来源钻瓜专利网。