[发明专利]一种针对异构存储系统的自适应数据动态调度方法和系统

摘要

本发明公开了一种针对异构存储系统的自适应数据动态调度方法和系统，该系统包括异构存储系统、存储管理器、数据调度器、参数调节器和性能采集器；异构存储系统包括高带宽存储器和传统内存；存储管理器分别与数据调度器、参数调节器和性能采集器连接，存储管理器用于启动数据调度器、参数调节器和性能采集器，并向其发送控制指令和数据，控制其工作。本发明能够结合高带宽存储器的硬件特性，合理调度数据，周期性地启动参数调节器，根据性能指标对异构存储系统中的数据放置进行优化，从而同时发挥高带宽存储器高带宽和传统内存低延迟的优势，提高应用带宽，缩短大数据应用程序的运行时间。

主权项

1.一种针对异构存储系统的自适应数据动态调度系统，其特征在于，所述系统包括异构存储系统、存储管理器、数据调度器、参数调节器和性能采集器；所述异构存储系统包括高带宽存储器和传统内存，所述异构存储器用于管理访问数据，并根据所述访问数据确定数据块访问信息，将所述数据块访问信息发送至所述存储管理器；所述数据块访问信息包括被访问的数据块编号、数据块字节数、时间戳信息和访问时间；所述存储管理器分别与所述数据调度器、所述参数调节器和所述性能采集器连接，所述存储管理器用于检索所述存储管理器中的信息表单，若所述信息表单中无所述被访问的数据块编号，则增加所述信息表单的信息栏用于写入所述数据块编号和所述数据块字节数；还用于循环启动所述数据调度器、所述参数调节器和所述性能采集器，并向所述数据调度器、所述参数调节器和所述性能采集器发送控制指令和数据，控制所述数据调度器、所述参数调节器和所述性能采集器的工作；所述数据调度器用于根据数据块价值和所述高带宽存储器的存储状态生成数据调度信息；所述参数调节器与所述性能采集器连接，所述性能采集器用于采集所述存储管理器中的各个阶段的性能指标，并将所述性能指标发送至所述参数调节器，所述参数调节器用于根据所述性能指标确定最优性能得分和最优参数，并将所述最优参数传送至所述存储管理器，所述存储管理器根据所述最优参数控制所述数据调度器实现数据动态调度。