[发明专利]对于分布式数据存储和处理系统的调整(tune)

摘要

本公开描述了对于分布式数据存储和处理系统的调整。一种设备可以包括调整器模块，所述调整器模块被配置为至少基于在所述设备中可用的配置信息来确定分布式数据存储和处理系统配置，并且基于基线配置来调节所述分布式数据存储和处理系统配置。所述调整器模块可以被进一步配置为接着确定从实际的分布式数据存储和处理系统操作推导的针对所述分布式数据存储和处理系统的样本信息，并且在创建所述分布式数据存储和处理系统的性能模型时使用所述样本信息。所述调整器模块可以被进一步配置为接着基于所述性能模型来评估对所述系统的配置改变，并且基于所述评估来确定推荐的分布式数据存储和处理系统配置。

主权项

1.一种用于对分布式数据存储和处理系统进行调整的设备，包括：至少一调整器模块，所述调整器模块被配置为：至少基于配置信息来确定分布式数据存储和处理系统(DDSPS)的配置；基于基线DDSPS配置来调节所述DDSPS的所述配置；并且其特征在于所述调整器模块还被配置为：确定从所述DDSPS的操作推导的样本信息，所述样本信息包括多个样本，每一个样本对应于在所述DDSPS的正常操作期间运行的工作负荷、针对所述工作负荷的相关联的配置、与所述工作负荷相对应的资源使用信息以及与所述工作负荷相对应的作业日志，其中，所述样本信息是使用直接搜索算法选择的，使得所述样本信息大体上反映所述DDSPS的正常操作；使用基于所述多个样本被训练的机器学习模型来创建所述DDSPS的性能模型，其中，所述性能模型包括通常仿真所述DDSPS的性能的数学模型；使用所述性能模型来评估在所述DDSPS的正常操作期间对所述DDSPS的推荐的配置改变是否将改进所述DDSPS的所述性能；并且当所述性能被预测为改进时，在所述DDSPS的正常操作期间，基于对所述推荐的配置改变的评估来调节所述DDSPS的配置。