[发明专利]一种分布式文件系统算法并行执行方法在审
申请号: | 202110477816.3 | 申请日: | 2021-04-29 |
公开(公告)号: | CN113176910A | 公开(公告)日: | 2021-07-27 |
发明(设计)人: | 周挺辉;周保荣;赵利刚;赵文猛;黄世平;郭瑞鹏;甄鸿越;黄冠标;王长香;吴小珊;徐原;翟鹤峰 | 申请(专利权)人: | 南方电网科学研究院有限责任公司;中国南方电网有限责任公司 |
主分类号: | G06F9/445 | 分类号: | G06F9/445;G06F9/48;G06F9/50;G06F16/182 |
代理公司: | 广州三环专利商标代理有限公司 44202 | 代理人: | 麦小婵;郝传鑫 |
地址: | 510000 广东省广州市萝岗区科*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 分布式 文件系统 算法 并行 执行 方法 | ||
1.一种分布式文件系统算法并行执行方法,其特征在于,所述方法包括:
输入可执行程序的参数数据;
加载所述可执行程序;
监控并管理所述可执行程序的生命周期;
将所述参数数据分发到不同机器;
将所述可执行程序分发到不同机器执行;
将并行处理后的所述可执行程序的结果回收,并将回收的结果输出。
2.根据权利要求1所述的分布式文件系统算法并行执行方法,其特征在于,所述输入可执行程序的参数数据,具体包括:
将所述可执行程序的参数数据以单文件或文件夹的方式上传到分布式文件系统中;
以列表方式或文件方式获取参数数据的存储地址。
3.根据权利要求2所述的分布式文件系统算法并行执行方法,其特征在于,所述加载所述可执行程序,具体包括:
通过上传和/或在分布式文件系统上选择的方式,加载所述可执行程序;
并通过所述可执行程序的命令行引用所述可执行程序的参数数据。
4.根据权利要求3所述的分布式文件系统算法并行执行方法,其特征在于,所述监控并管理所述可执行程序的生命周期,具体包括:
监控并管理所述可执行程序的调度执行、资源管理和结果回收的流程。
5.根据权利要求4所述的分布式文件系统算法并行执行方法,其特征在于,所述将所述参数数据分发到不同机器,具体包括:
通过所述调度器将所述参数数据从所述分布式文件系统分发到各个机器;
在各个机器上安装执行引擎。
6.根据权利要求5所述的分布式文件系统算法并行执行方法,其特征在于,所述将所述可执行程序分发到不同机器执行,具体包括:
根据所述参数数据,将每一个参数数据的可执行程序作为一个任务;
根据预设的任务分发机制将任务随机分发到空余机器执行。
7.根据权利要求6所述的分布式文件系统算法并行执行方法,其特征在于,所述将并行处理后的所述可执行程序的结果回收,并将回收的结果输出,具体包括:
监控所述可执行程序的任务执行状态;
当所述任务执行完成时,根据预设的条件,筛选出符合条件的结果;
将筛选出的结果上传到所述分布式文件系统预设的目录中;
结果回收完毕后,将所述目录中的结果输出。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于南方电网科学研究院有限责任公司;中国南方电网有限责任公司,未经南方电网科学研究院有限责任公司;中国南方电网有限责任公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202110477816.3/1.html,转载请声明来源钻瓜专利网。