[发明专利]一种计算脚本并行处理方法及装置在审
申请号: | 201810841897.9 | 申请日: | 2018-07-27 |
公开(公告)号: | CN109508233A | 公开(公告)日: | 2019-03-22 |
发明(设计)人: | 陈亮;王伟;张珏亚;严永兵 | 申请(专利权)人: | 北京中电普华信息技术有限公司;国网信息通信产业集团有限公司;国家电网有限公司 |
主分类号: | G06F9/50 | 分类号: | G06F9/50;G06F9/52 |
代理公司: | 北京集佳知识产权代理有限公司 11227 | 代理人: | 王宝筠 |
地址: | 100192 北京市海*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | 本发明提供了一种计算脚本并行处理方法及装置,该方法包括:遍历计算脚本的执行路径;从计算脚本中确定当前批次处理的目标计算脚本;将目标计算脚本随机分配给计算节点,并同时开启计算节点,以使计算节点执行路径运行所分配的目标计算脚本。本发明通过计算脚本灵活分批,大大提高了大数据平台并行处理计算脚本的吞吐量,由单一脚本分布式变为批量脚本运算,大大缩短了整体运行时间,缓解甚至避免了集群软硬件资源的空闲浪费。 | ||
搜索关键词: | 脚本 并行处理 计算节点 目标计算 软硬件资源 遍历计算 批次处理 随机分配 大数据 集群 吞吐量 运算 空闲 缓解 灵活 分配 | ||
【主权项】:
1.一种计算脚本并行处理方法,其特征在于,包括:遍历计算脚本的执行路径;从所述计算脚本中确定当前批次处理的目标计算脚本;将所述目标计算脚本随机分配给计算节点,并同时开启所述计算节点,以使所述计算节点执行路径运行所分配的所述目标计算脚本。
下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京中电普华信息技术有限公司;国网信息通信产业集团有限公司;国家电网有限公司,未经北京中电普华信息技术有限公司;国网信息通信产业集团有限公司;国家电网有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/patent/201810841897.9/,转载请声明来源钻瓜专利网。