[发明专利]一种基于强化学习的陆基装备集群维护资源智能化配置与调度策略制定方法

说明书

本发明提供了一种基于强化学习的陆基装备集群维护资源智能化配置与调度策略制定方法，其具体步骤如下：步骤(1)：陆基装备集群维护资源配置与调度过程描述；步骤(2)：基于智能体的陆基装备集群信息交互建模；步骤(3)：陆基装备集群智能化调度规则；步骤(4)：基于强化学习的陆基装备集群资源调度与多供应点多备件资源配置策略制定算法；本发明考虑陆基装备的异质保障资源、多供应点横向/纵向调度等特征，发明了一种基于强化学习的陆基装备集群维护资源智能化配置与调度策略制定方法，可在考虑陆基装备异质保障资源的情况下，为多级库存点(中心库存点、基层库存点)的保障资源配置进行决策。然后，在保障资源配置条件下，为陆基装备集群保障资源提供包含横向/纵向优化调度方案，在满足陆基装备集群维修保障需求的同时，可有效降低陆基装备集群的维护成本。

(一)所属技术领域

本发明属于涉及装备集群保障技术领域，涉及一种基于强化学习的陆基装备集群维护资源智能化配置与调度策略制定方法。

(二)背景技术

随着国际社会形势的日益复杂，国防科技的地位显得愈发重要。现代高科技战争不仅重视装备的作战性能，更重视装备的保障能力，从某种程度来看，装备的保障能力已成为了影响部队整体作战能力的重要因素。以陆基装备为代表，随着电子化、信息化程度的不断提高，陆基装备的系统结构日益复杂，技术日益密集，使得陆基装备的维护成本日益增加，占据陆基装备寿命周期内总费用的60％甚至更高。考虑到陆基装备机动性强的特点，其在集结、任务执行、返回的任何时间和地点均可进行维修，这使得陆基装备集群维修所需的备件通常会存放在多个供应点，且各供应点之间可以进行横向、纵向调运等活动，加剧了陆基装备集群维护资源调度过程的复杂化。

现有的陆基装备集群维护资源配置方法主要包括经验法和基于装备故障率的配置方法。经验法是最普遍的一种装备保障资源配置方法，其以经验数据为主要依据，不考虑装备的任务/使用过程，对保障资源进行大批量存放，不仅无法有效提高装备的效能，还造成了巨大的保障成本。基于装备故障率的配置方法是以装备的寿命规律或静态可靠性特征来制定装备保障资源的配置方案，导致保障资源的配置方案精确性和准确性较低，无法满足现代陆基装备精确化、异质化的保障资源配置方案要求。

陆基装备集群维护资源调度方法主要考虑长订货周期问题，在品种、数量和时间等方面都无法有效支持精确保障，配送匹配度不高。此外，已有算法对求解高维度(品种+数量)资源调度问题的能力差，对陆基装备随行维修等特征支持也不够，因此尚无法有效支持陆基装备资源的动态调度。

因此，如何考虑陆基装备的异质保障资源、多供应点的横向/纵向调度问题，在装备维护需求确定的情况下，设计一种智能化的维护资源调度与多供应点备件自检配置策略制定方法是一个亟待解决的复杂问题。

(三)发明内容

本发明的目的是为了解决上述问题，提出一种考虑健康状态劣化的装备保障资源配置策略制定方法，具体步骤如下：

步骤(1)：陆基装备集群维护资源配置与调度过程描述；

步骤(2)：基于智能体的陆基装备集群信息交互建模；

步骤(3)：陆基装备集群智能化调度规则；

步骤(4)：基于强化学习的陆基装备集群资源调度与多供应点多备件资源配置策略制定算法；