[发明专利]一种数据集快速缓存的方法、系统、设备及介质

摘要

本发明公开了一种数据集快速缓存的方法、系统、设备和存储介质，方法包括：建立每个数据集的源地址与总分的对应关系，并将总分记录在源地址列表中；获取计算节点的性能指标、网络拓扑、数据集使用次数和使用过程中对当前节点的影响三种参数；对三种参数分配权重，基于权重计算计算节点的总分，并判断源地址列表中是否存在总分；以及源地址列表中存在总分，根据总分确定数据集的源地址，并将数据集缓存到总分对应的源地址。本发明根据计算节点网络拓扑、计算节点性能和已缓存数据集有效性进行打分，按照分数确定数据集的源地址，来完成数据集的快速缓存，解决了数据集服务器单点故障导致业务延迟的问题，有效的提高计算资源的利用率和生产率。