[发明专利]一种智能配置计算机集群的方法及装置在审
申请号: | 201911310252.3 | 申请日: | 2019-12-18 |
公开(公告)号: | CN111124782A | 公开(公告)日: | 2020-05-08 |
发明(设计)人: | 马强 | 申请(专利权)人: | 无线生活(杭州)信息科技有限公司 |
主分类号: | G06F11/22 | 分类号: | G06F11/22;G06F11/34;G06K9/62;G06N20/00 |
代理公司: | 北京尚伦律师事务所 11477 | 代理人: | 申雪梅 |
地址: | 310000 浙江省杭州市*** | 国省代码: | 浙江;33 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 智能 配置 计算机 集群 方法 装置 | ||
1.一种智能配置计算机集群的方法,其数据在于,包括:
解析出计算机集群中的各个任务所需的性能数据;
构建所述计算机集群中的各个任务的性能数据模型库;
使用所述性能数据库中的各种任务组合,模拟出相应的计算机集群的较优的调参数据;
分析待运行的任务组合,实时设置计算机集群的调参数据。
2.如权利要求1所述的方法,其数据在于,所述分析出计算机集群中的各个任务所需的性能数据,包括:
获取计算机集群的历史运行日志;
根据计算机集群的历史运行日志,解析出各个任务所需的性能数据,所述性能数据包括I/O处理性能数据和运算力性能数据;
根据计算机集群的历史运行日志,解析计算机集群在各个历史调参数据下的性能数据。
3.如权利要求1所述的方法,其数据在于,所述构建所述计算机集群中的各个任务的性能数据模型库,包括:
对所述计算机集群中的各个任务进行聚类分析;
使用机器学习对所述聚类分析的结果进行学习;
构建所述计算机集群中的各个任务的性能数据模型库。
4.如权利要求1所述的方法,其数据在于,所述使用所述性能数据库中的各种任务组合,模拟出相应的计算机集群的较优的调参数据,包括:
使用不同的调参数据对所述性能数据库中的各种任务组合进行测试;
分析所述测试结果,所述测试结果包括计算机集群的平均性能数据、排名前n个调参数据和不同调参数据下的性能数据对比。
5.如权利要求1所述的方法,其数据在于,所述分析待运行的任务组合,实时设置计算机集群的调参数据,包括:
分析待运行的任务组合,得到所述待运行的任务组合所需的性能数据;
根据历史模拟的结果,实时设置计算机集群的调参数据。
6.一种智能配置计算机集群的装置,其特征在于,包括:
解析模块,用于解析出计算机集群中的各个任务所需的性能数据;
构建模块,用于构建所述计算机集群中的各个任务的性能数据模型库;
模拟模块,用于使用所述性能数据库中的各种任务组合,模拟出相应的计算机集群的较优的调参数据;
设置模块,用于分析待运行的任务组合,实时设置计算机集群的调参数据。
7.根据权利要求6的装置,其特征在于,所述解析模块,包括:
获取子模块,用于获取计算机集群的历史运行日志;
第一解析子模块,用于根据计算机集群的历史运行日志,解析出各个任务所需的性能数据,所述性能数据包括I/O处理性能数据和运算力性能数据;
第二解析子模块,用于根据计算机集群的历史运行日志,解析计算机集群在各个历史调参数据下的性能数据。
8.根据权利要求6的装置,其特征在于,所述构建模块,包括:
聚类子模块,用于对所述计算机集群中的各个任务进行聚类分析;
学习子模块,用于使用机器学习对所述聚类分析的结果进行学习;
构建子模块,用于构建所述计算机集群中的各个任务的性能数据模型库。
9.根据权利要求6的装置,其特征在于,所述模拟模块。包括:
测试子模块,用于使用不同的调参数据对所述性能数据库中的各种任务组合进行测试;
第一分析子模块,用于分析所述测试结果,所述测试结果包括计算机集群的平均性能数据、排名前n个调参数据和不同调参数据下的性能数据对比。
10.根据权利要求6的装置,其特征在于,所述设置模块,包括:
第二分析子模块,用于分析待运行的任务组合,得到所述待运行的任务组合所需的性能数据;
设置子模块,用于根据历史模拟的结果,实时设置计算机集群的调参数据。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于无线生活(杭州)信息科技有限公司,未经无线生活(杭州)信息科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201911310252.3/1.html,转载请声明来源钻瓜专利网。
- 上一篇:保护切换方法、装置和网络设备
- 下一篇:一种Pt纳米粒子的制备方法