[发明专利]一种用于深度学习的资源管理系统及方法在审
申请号: | 201910009875.0 | 申请日: | 2019-01-05 |
公开(公告)号: | CN109508238A | 公开(公告)日: | 2019-03-22 |
发明(设计)人: | 代豪;蒙孝宗;李清 | 申请(专利权)人: | 咪付(广西)网络技术有限公司 |
主分类号: | G06F9/50 | 分类号: | G06F9/50;G06N3/08 |
代理公司: | 暂无信息 | 代理人: | 暂无信息 |
地址: | 530007 广西壮族自治区南宁市高新区*** | 国省代码: | 广西;45 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | 本发明公开了一种用于深度学习的资源管理系统及方法,所述系统包括:Kubernetes集群、Mysql存储模块和分布式存储器;所述Kubernetes集群包括训练管理平台和TensorFlow项目平台,所述训练管理平台包括注册器和控制器,所述TensorFlow项目平台由集群生成器构成;所述方法包括:步骤S100:创建包含TensorFlow训练脚本的Docker镜像,并将镜像推送到镜像仓库;步骤S200:注册TensorFlow项目,配置项目信息;步骤S300:创建TensorFlow项目平台,生成TensorFlow集群;步骤S400:启动任务训练,定时保存训练文件;步骤S500:任务训练结束,生成结果模型。通过本发明的系统及方法,可实现基于TensorFlow的深度学习训练任务资源的统一调度与管理,监控训练过程,支持自动中断与重启,减轻AI开发人员的工作负担,提高任务训练效率。 | ||
搜索关键词: | 集群 项目平台 资源管理系统 管理平台 分布式存储器 存储模块 工作负担 监控训练 结果模型 任务资源 统一调度 项目信息 学习训练 训练效率 自动中断 控制器 生成器 注册器 脚本 重启 创建 仓库 保存 学习 配置 开发 管理 | ||
【主权项】:
1.一种用于深度学习的资源管理系统,其特征在于,该系统包括:Kubernetes集群、Mysql存储模块和分布式存储器;所述Kubernetes集群包括训练管理平台和TensorFlow项目平台,所述训练管理平台包括注册器和控制器,所述TensorFlow项目平台由集群生成器构成;所述注册器用于注册TensorFlow项目,配置项目信息;所述控制器用于解析项目配置文件和创建TensorFlow项目;所述集群生成器为训练任务创建TensorFlow集群,并进行集群管理;所述TensorFlow集群包含参数服务器和计算节点;所述Mysql存储模块用于存储TensorFlow项目配置信息;所述分布式存储器用于存储训练数据和训练结果。
下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于咪付(广西)网络技术有限公司,未经咪付(广西)网络技术有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/patent/201910009875.0/,转载请声明来源钻瓜专利网。