[发明专利]一种基于Web的通用Spark任务提交系统及方法在审
| 申请号： | 202010408018.0 | 申请日： | 2020-05-14 |
| 公开（公告）号： | CN111625269A | 公开（公告）日： | 2020-09-04 |
| 发明（设计）人： | 贺群雄;匡岳锋;胡鹏;傅苗;曹林;刘湘 | 申请（专利权）人： | 中电工业互联网有限公司 |
| 主分类号： | G06F8/70 | 分类号： | G06F8/70;G06F8/71 |
| 代理公司： | 长沙国科天河知识产权代理有限公司 43225 | 代理人： | 邱轶 |
| 地址： | 410000 湖南省长沙市长沙高新*** | 国省代码： | 湖南;43 |
| 权利要求书： | 查看更多 | 说明书： | 查看更多 |
| 摘要： | 本发明公开一种基于Web的通用Spark任务提交系统及方法，该系统包括Web界面模块、提交服务模块、Spark任务上传模块、数据库；Web界面模块用于页面展示以及与数据库数据交互，将用户配置的Spark任务提交信息保存至数据库，以及数据库中的任务处理监控信息进行展示；提交服务模块与数据库数据交互，读取存储在数据库中的Spark任务提交信息并生成提交命令；Spark任务上传模块与提交服务模块、数据库数据交互，在获取提交命令命令后，读取Spark任务提交信息并生成对应的Spark任务的jar包上传至Spark集群，同时将任务处理监控信息保存至数据库。开发者可以不用编写代码和提交任务，只需要在Web上配置好对应的数据处理流程和任务运行参数，便可以自动在spark集群上提交改任务。 | ||
| 搜索关键词： | 一种 基于 web 通用 spark 任务 提交 系统 方法 | ||
【主权项】：
暂无信息
下载完整专利技术内容需要扣除积分，VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息，商用须获得专利权人授权。该专利全部权利属于中电工业互联网有限公司，未经中电工业互联网有限公司许可，擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作，请联系【客服】
本文链接：http://www.vipzhuanli.com/patent/202010408018.0/，转载请声明来源钻瓜专利网。
- 上一篇：马达定子抗干扰结构
- 下一篇：一种大功率光电复合直流海缆的生产方法
