[发明专利]一种分布式调度应用的方法以及装置在审
申请号: | 202010985838.6 | 申请日: | 2020-09-18 |
公开(公告)号: | CN112241316A | 公开(公告)日: | 2021-01-19 |
发明(设计)人: | 梁俊杰 | 申请(专利权)人: | 武汉迎风聚智科技有限公司 |
主分类号: | G06F9/48 | 分类号: | G06F9/48;G06F9/50;G06F9/445;G06F11/36 |
代理公司: | 北京众达德权知识产权代理有限公司 11570 | 代理人: | 詹守琴 |
地址: | 430000 湖北省武汉市武昌*** | 国省代码: | 湖北;42 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 分布式 调度 应用 方法 以及 装置 | ||
1.一种分布式调度应用的方法,其特征在于,所述方法包括:
第一处理设备接收任务处理请求,所述任务处理请求用于请求处理目标任务;
所述第一处理设备将所述目标任务拆分为不同的子任务,将不同的所述子任务通过RESTFUL接口分发至不同的第二处理设备;
所述第二处理设备通过预设的Webserver服务解析接收到的所述子任务,用YAML格式配置所述子任务的配置文件,通过CLI接口加载所述配置文件,以执行所述子任务;
所述第一处理设备基于多个所述第二处理设备执行不同的所述任务所产生的任务数据,生成所述目标任务的处理结果。
2.根据权利要求1所述的方法,其特征在于,所述目标任务携带有处理设备标识与子任务标识之间的配对数据,所述处理设备标识用于标识对应的处理设备,所述子任务标识用于标识对应的所述子任务,所述第一处理设备将所述目标拆分为不同的子任务,将不同的所述子任务通过RESTFUL接口分发至不同的第二处理设备包括:
所述第一处理设备基于所述子任务标识所标识的所述子任务,将所述目标任务拆分为不同的所述子任务;
所述第一处理设备基于所述配对数据以及所述处理设备标识所标识的处理设备,将不同的所述子任务通过RESTFUL接口分发至不同的第二处理设备。
3.根据权利要求1所述的方法,其特征在于,所述第一处理设备将不同的所述子任务通过RESTFUL接口分发至不同的第二处理设备之前,所述方法还包括:
所述第一处理设备解析不同的所述子任务分别所需占用的系统资源;
所述第一处理设备从设备池中的不同处理设备中,分配满足不同的所述子任务分别所需占用的系统资源的不同的所述第二处理设备,其中,所述设备池的配置数据中实时更新有所述设备池中的不同处理设备的空闲系统资源,所述空闲资源为当前空闲资源或者未来时间段的空闲资源。
4.根据权利要求3所述的方法,其特征在于,所述方法还包括:
所述第一处理设备接收不同的所述第二处理设备发送的指示信息,其中,所述指示信息用于指示系统资源占用任务或者空闲系统资源;
所述第一处理设备根据所述指示信息指示的系统资源占用任务,预测对应所述第二处理设备在所述未来时间段的空闲系统资源,得到空闲系统资源预测结果,并根据所述空闲资源预测结果更新所述配置数据;
或者,所述第一处理设备根据所述指示信息指示的空闲系统资源,更新所述配置数据。
5.根据权利要求4所述的方法,其特征在于,所述第一处理设备根据所述指示信息指示的系统资源占用任务,预测对应所述第二处理设备在所述未来时间段的空闲系统资源包括:
所述第一处理设备提取所述系统资源占用任务的任务特征信息;
所述第一处理设备将所述任务特征信息输入空闲系统资源预测模型,以预测对应所述第二处理设备在所述未来时间段的空闲系统资源,并得到所述空间系统资源预测模型输出的所述空闲系统资源预测结果,其中,所述空闲系统资源预测模型是通过不同系统资源占用任务的任务特征信息训练神经网络模型得到的,所述不同系统资源占用任务的任务特征信息分别标注有对应的空闲系统资源变化趋势。
6.一种分布式调度应用的装置,其特征在于,所述装置包括:
接收单元,用于接收任务处理请求,其中,所述任务处理请求用于请求处理目标任务;
分发单元,用于将所述目标任务拆分为不同的所述子任务,将不同的所述子任务通过RESTFUL接口分发至不同的第二处理设备;
执行单元,用于通过预设的Webserver服务解析接收到的所述子任务,用YAML格式配置所述子任务的配置文件,通过CLI接口加载所述配置文件,以执行所述任务;
生成单元,用于基于多个所述第二处理设备执行不同的所述子任务所产生的测试数据,生成所述目标任务的处理结果。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于武汉迎风聚智科技有限公司,未经武汉迎风聚智科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202010985838.6/1.html,转载请声明来源钻瓜专利网。
- 上一篇:一种常用码型自动编码的方法
- 下一篇:一种纤维叶片的制作方法