[发明专利]基于可视化界面快速生成分布式批处理任务的方法和装置在审
| 申请号： | 202110906348.7 | 申请日： | 2021-08-09 |
| 公开（公告）号： | CN113742040A | 公开（公告）日： | 2021-12-03 |
| 发明（设计）人： | 张鑫;毕阳洋;段智永;曹杰 | 申请（专利权）人： | 广州市易工品科技有限公司 |
| 主分类号： | G06F9/48 | 分类号： | G06F9/48;G06F16/2455 |
| 代理公司： | 广州智斧知识产权代理事务所(普通合伙) 44649 | 代理人： | 孔德超 |
| 地址： | 510000 广东省*** | 国省代码： | 广东;44 |
| 权利要求书： | 查看更多 | 说明书： | 查看更多 |
| 摘要： | 本发明实施例涉及数据处理的技术领域，公开了一种基于可视化界面快速生成分布式批处理任务的方法和装置。该方法包括：接收使用者在可视化界面填写的配置信息，配置信息包括spark配置信息、Input配置信息、transform配置信息以及Output配置信息；将配置信息组织成配置文件，并存入存储介质中；接收使用者的任务启动请求，调取配置文件，并将配置文件传入后台的执行引擎中，由执行引擎解析配置文件信息，生成spark任务，调度执行批处理任务。实施本发明实施例，可以通过可视化界面填写配置信息，自动生成配置文件，通过执行引擎解析配置文件并调度执行批处理操作，加速批处理任务的构建和处理。 | ||
| 搜索关键词： | 基于 可视化 界面 快速 生成 分布式 批处理 任务 方法 装置 | ||
【主权项】：
暂无信息
下载完整专利技术内容需要扣除积分，VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息，商用须获得专利权人授权。该专利全部权利属于广州市易工品科技有限公司，未经广州市易工品科技有限公司许可，擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作，请联系【客服】
本文链接：http://www.vipzhuanli.com/patent/202110906348.7/，转载请声明来源钻瓜专利网。
