[发明专利]缓存部署与任务调度方法、终端和计算机可读存储介质在审
申请号: | 202011353572.X | 申请日: | 2020-11-25 |
公开(公告)号: | CN112416368A | 公开(公告)日: | 2021-02-26 |
发明(设计)人: | 郑烇;鲍裕麟;陈双武 | 申请(专利权)人: | 中国科学技术大学先进技术研究院 |
主分类号: | G06F8/60 | 分类号: | G06F8/60;G06F9/48;G06F16/182 |
代理公司: | 深圳市世纪恒程知识产权代理事务所 44287 | 代理人: | 杨培权 |
地址: | 230000 安徽*** | 国省代码: | 安徽;34 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | 本申请公开了一种缓存部署与任务调度方法、终端和计算机可读存储介质,该方法包括:获取训练集的增益矩阵,基于增益矩阵中的缓存增益将训练集部署至各缓存节点中;接收任务调度指令,获取任务中使用的训练集和第一处理器数量;根据使用的训练集和第一处理器数量遍历部署矩阵以确定缓存节点,将任务调度至缓存节点中。解决了目前针对HDFS性能优化的研究多停留在其自身,忽略了上层业务的特点,从而难以解决上层应用的痛点以及优化效果不佳的技术问题,提高了人工智能应用场景下的计算节点缓存利用率和命中率,降低了HDFS集群网络、I/O口压力和深度学习任务数据的加载时间,提高了深度学习任务的执行效率。 | ||
搜索关键词: | 缓存 部署 任务 调度 方法 终端 计算机 可读 存储 介质 | ||
【主权项】:
暂无信息
下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于中国科学技术大学先进技术研究院,未经中国科学技术大学先进技术研究院许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/patent/202011353572.X/,转载请声明来源钻瓜专利网。
- 上一篇:一种饭盒
- 下一篇:一种生物质炭、热、电联产系统及其工艺