[发明专利]一种天文数据并行处理装置和方法有效
申请号: | 201910693839.0 | 申请日: | 2019-07-29 |
公开(公告)号: | CN110543361B | 公开(公告)日: | 2023-06-13 |
发明(设计)人: | 李长华;崔辰州;李正;韩叙;和兰 | 申请(专利权)人: | 中国科学院国家天文台 |
主分类号: | G06F9/50 | 分类号: | G06F9/50 |
代理公司: | 中科专利商标代理有限责任公司 11021 | 代理人: | 任岩 |
地址: | 100012 *** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 天文 数据 并行 处理 装置 方法 | ||
1.一种天文数据并行处理装置,包括:
一计算集群,包括一管理服务器、一存储服务器和多个计算服务器,所述管理服务器内配置有作业管理系统和启动模块,所述作业管理系统用于将多个天文数据处理任务设置为一任务队列,顺序执行或按设定时间自动执行所述多个天文数据处理任务;所述启动模块用于发起天文数据处理任务并将并行模块分配于多个所述计算服务器中运行;
所述存储服务器用于存储多个天文数据文件,参数文件以及天文数据处理指令,该指令由运行于多个所述计算服务器同时执行,执行时包括如下步骤:
利用所述并行模块同时从参数文件中提取参数,并将不同的参数输入至相同的天文数据处理程序,使串行化的天文数据处理程序同时处理不同的天文数据;发起天文数据处理任务,将所述天文数据并行分配于多个所述计算服务器的天文数据处理程序中运行。
2.根据权利要求1所述的装置,其中所述管理服务器、存储服务器和计算服务器为通过以太网络连接且工作于同一网段内。
3.一种应用权利要求1所述的装置对天文数据并行处理的方法,包括:
运行启动模块;
将并行模块分配于多个计算服务器运行,并为天文数据处理程序分配一个任务号;
启动天文数据处理程序,同时根据任务号从存储服务器内的参数文件中提取参数并将其输入至天文数据处理程序;
根据参数处理存储服务器内的天文数据文件,并保持结果。
4.根据权利要求3所述的方法,其中,所述天文数据处理程序同时运行于所述多个计算服务器中。
5.根据权利要求4所述的方法,其中包括:
通过并行模块,同时运行于所述多个所述计算服务器中,从参数文件中提取参数并启动天文数据处理程序。
6.根据权利要求5所述的方法,其中包括:
通过启动模块,运行于所述管理服务器,发起天文数据处理任务并将所述并行模块分配于多个所述计算服务器中运行。
7.根据权利要求6所述的方法,其中所述的并行模块遵从MPI标准规范。
8.根据权利要求7所述的方法,其中所述的参数文件为文本文件格式,每一行包括一任务号及为该任务号对应的天文数据处理程序所分配的天文数据文件。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于中国科学院国家天文台,未经中国科学院国家天文台许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201910693839.0/1.html,转载请声明来源钻瓜专利网。
- 上一篇:一种任务处理方法及系统
- 下一篇:一种图形处理器管理方法、装置及服务器
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置