[发明专利]排产方法、装置、设备及存储介质

说明书

本发明公开了一种排产方法、装置、设备及存储介质，该排产方法包括：确定待排产信息，其中，待排产信息用于指示待排产设备的信息以及待排产工件的信息；根据待排产信息初始化俄罗斯方块线上环境；根据预先训练好的排产模型与俄罗斯方块线上环境进行交互，得到排产模型输出的每个待排产设备的排产计划，其中，排产模型为利用深度强化学习方法、以提高设备均衡利用率为指标训练得到的模型，每个待排产设备的排产计划包括待排产设备对应的待排产工件的信息以及各待排产工件的加工顺序。本发明实施例的排产方案可以提高设备均衡利用率以及排产效率。

技术领域

本发明涉及智能排产技术领域，尤其涉及一种排产方法、装置、设备及存储介质。

背景技术

随着市场竞争的激烈，加工生产工厂需要根据企业制造资源的实际能力和设备产能、库存、生产进度的动态变化来调整，制造过程的排产优化和监控成为提高企业核心竞争力不可回避的环节。

在生产规模和产品复杂度不断增大的情况下，为解决生产调度的排产排程问题，原始的人工调度方法已经越来越难以满足要求，而传统解决排产调度的求解器求解和遗传算法方法，存在排产调度计算时间过长及设备均衡利用率低等问题。

发明内容

本发明提供了一种排产方法、装置、设备及存储介质，以解决相关技术中排产调度计算时间过长及设备均衡利用率低的技术问题。

根据本发明的一方面，提供了一种排产方法，包括：

确定待排产信息；其中，所述待排产信息用于指示待排产设备的信息以及待排产工件的信息；

根据所述待排产信息初始化俄罗斯方块线上环境；

根据预先训练好的排产模型与所述俄罗斯方块线上环境进行交互，得到所述排产模型输出的每个待排产设备的排产计划；其中，所述排产模型为利用深度强化学习方法、以提高设备均衡利用率为指标训练得到的模型，每个待排产设备的排产计划包括所述待排产设备对应的待排产工件的信息以及各待排产工件的加工顺序。

如上所示的方法中，所述根据预先训练好的排产模型与所述俄罗斯方块线上环境进行交互，得到所述排产模型输出的每个待排产设备的排产计划，包括：

获取所述俄罗斯方块线上环境根据所述待排产信息输出的中间状态信息；

向所述排产模型输入所述中间状态信息，获取所述排产模型根据所述中间状态信息生成的策略动作，向所述俄罗斯方块线上环境反馈所述策略动作，获取所述俄罗斯方块线上环境根据所述策略动作输出的新的中间状态信息，重复执行此步骤，直至所有待排产工件均被排产，根据所述排产模型输出的策略动作确定每个待排产设备的排产计划。

如上所示的方法中，所述中间状态信息包括：当前已排产工件的类型、当前已排产工件的位置、各待排产设备的负荷、当前未排产工件的信息以及当前上一个动作的信息；

所述策略动作包括：选取的未完成排产的工件的标识以及所述未完成排产的工件对应的待排产设备的标识。

如上所示的方法中，所述待排产设备的信息包括所述待排产设备的数量和类型，所述待排产工件的信息包括所述待排产工件的数量和类型；

所述待排产信息还包括：待排产设备与待排产工件的映射关系。

如上所示的方法中，当两个加工顺序相邻的待排产工件的类型不同时，所述排产计划还包括：所述两个加工顺序相邻的待排产工件之间的换型操作。

如上所示的方法中，在所述根据预先训练好的排产模型与所述俄罗斯方块线上环境进行交互，得到所述排产模型输出的每个待排产设备的排产计划之前，所述方法还包括：

根据训练用排产信息，初始化俄罗斯方块训练环境；

获取所述俄罗斯方块训练环境根据所述训练用排产信息输出的新训练中间状态信息；