[发明专利]一种分布式存储系统的优化方法及系统

说明书

本发明提供一种分布式存储系统的优化方法及系统，包括：获取分布式存储系统中的可执行脚本；调用所述可执行脚本，获取所述分布式存储系统中的所有pool信息；计算所述所有pool信息，得到放置组PG数量和管理放置组PGP数量；基于所述PG数量和所述PGP数量对所述分布式存储系统中的pool进行优化。本发明通过预置的可执行脚本，自动估算出合理的放置组数量及管理放置组数量，从而提高分布式存储系统的性能和可靠性，避免人工操作的繁琐和不确定性。

技术领域

本发明涉及分布式存储技术领域，尤其涉及一种分布式存储系统的优化方法及系统。

背景技术

随着基于rook-ceph部署的ceph分布式存储技术在边缘云生产环境的规模化应用，基于rook-ceph部署的ceph分布式存储中pool的pg_num/pgp_num的数量是否合理，即放置组PG数量和管理放置组PGP数量的合理性直接影响ceph分布式存储系统的性能和可靠性。

通常在ceph生产环境中，将pg_autoscale_mode默认配置成pg_autoscale_mode＝warn，该命令的作用是使系统能自动对pg_num/pgp_num的数量进行优化，如果开启pg_autoscale_mode＝on这个配置，风险是很大的，虽然能实现自动优化，但是在复杂的生产环境中容易出现各种不稳定的问题，影响系统的稳定性和可靠性，所以采用默认的配置成“warn”，即当需要调整PG计数时，ceph只发出运行状况警报，不进行自动化设置。而如何能自动化的给ceph存储各个pool设置合理的pg_num/pgp_num的数量，然后自动化执行pg_num/pgp_num的数量的设置，还没有较好的解决方法。

因此，针对上述问题，需要提出一种新的分布式存储系统的优化方法。

发明内容

本发明提供一种分布式存储系统的优化方法及系统，用以解决现有技术中针对ceph分布式存储内所有pool的pg_num/pgp_num的数量的优化和设置，尚未有对应解决方法的缺陷。

第一方面，本发明提供一种分布式存储系统的优化方法，包括：

获取分布式存储系统中的可执行脚本；

调用所述可执行脚本，获取所述分布式存储系统中的所有pool信息；

计算所述所有pool信息，得到放置组PG数量和管理放置组PGP数量；

基于所述PG数量和所述PGP数量对所述分布式存储系统中的pool进行优化。

根据本发明提供的一种分布式存储系统的优化方法，所述获取分布式存储系统中的可执行脚本之前，还包括：

确定PG数量更新执行脚本和PG数量计算执行脚本；

将所述PG数量更新执行脚本和所述PG数量计算执行脚本放入各控制节点的用户根目录中，形成所述可执行脚本。

根据本发明提供的一种分布式存储系统的优化方法，所述调用所述可执行脚本，获取所述分布式存储系统中的所有pool信息，包括：

确定由所述PG数量更新执行脚本调用所述PG数量计算执行脚本；

所述PG数量计算执行脚本分别获取具有up状态的对象存储设备OSD数量、所有pool名称、所有pool副本数、原始PG数量和原始PGP数量。

根据本发明提供的一种分布式存储系统的优化方法，所述计算所述所有pool信息，得到放置组PG数量和管理放置组PGP数量之前，还包括：

所述PG数量计算执行脚本获取所述分布式存储系统中具有active状态及clean状态的PG。

根据本发明提供的一种分布式存储系统的优化方法，所述计算所述所有pool信息，得到放置组PG数量和管理放置组PGP数量，包括：