[发明专利]基于深度强化学习的多目标柔性作业车间调度方法和装置在审
申请号: | 202010983212.1 | 申请日: | 2020-09-17 |
公开(公告)号: | CN112149987A | 公开(公告)日: | 2020-12-29 |
发明(设计)人: | 张林宣;罗术 | 申请(专利权)人: | 清华大学 |
主分类号: | G06Q10/06 | 分类号: | G06Q10/06;G06N3/08;G06N3/04 |
代理公司: | 北京清亦华知识产权代理事务所(普通合伙) 11201 | 代理人: | 张大威 |
地址: | 10008*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 基于 深度 强化 学习 多目标 柔性 作业 车间 调度 方法 装置 | ||
1.一种基于深度强化学习的多目标柔性作业车间调度方法,其特征在于,包括:
读取当前重调度时刻的生产线状态特征向量;
将所述生产线状态特征向量输入训练后的目标智能体的目标策略网络,得到所述当前重调度时刻的调度目标;
将所述生产线状态特征向量和所述调度目标输入训练后的工件智能体的工件策略网络,得到所述当前重调度时刻的工件指派规则;
将所述生产线状态特征向量和所述调度目标输入训练后的机器智能体的机器策略网络,得到所述当前重调度时刻的机器分配规则;
根据所述工件指派规则选取待加工工件,根据所述机器分配规则选取加工机器,以及通过所述加工机器对所述待加工工件的下一道工序进行加工处理。
2.如权利要求1所述的基于深度强化学习的多目标柔性作业车间调度方法,其特征在于,将所述当前重调度时刻的生产线状态特征向量输入训练后的目标智能体的目标策略网络,得到所述当前重调度时刻的调度目标,包括:
根据所述目标策略网络中的深度神经网络对所述生产线状态特征向量进行处理后输入分类函数得到每一个优化目标对应的选择概率;
使用轮盘赌方法根据不同优化目标的选择概率确定所述调度目标。
3.如权利要求1所述的基于深度强化学习的多目标柔性作业车间调度方法,其特征在于,将所述当前重调度时刻的生产线状态特征向量和所述当前重调度时刻的调度目标输入训练后的工件智能体的工件策略网络,得到所述当前重调度时刻的工件指派规则,包括:
根据所述工件策略网络中的深度神经网络对所述生产线状态特征向量和所述调度目标进行处理后输入分类函数得到每一个工件指派规则对应的选择概率;
使用轮盘赌方法根据不同工件指派规则的选择概率确定所述工件指派规则。
4.如权利要求1所述的基于深度强化学习的多目标柔性作业车间调度方法,其特征在于,将所述当前重调度时刻的生产线状态特征向量和所述当前重调度时刻的调度目标输入训练后的机器智能体的机器策略网络,得到当前重调度时刻的机器分配规则,包括:
根据所述机器策略网络中的深度神经网络对所述生产线状态特征向量和所述调度目标进行处理后输入分类函数得到每一个机器分配规则对应的选择概率;
使用轮盘赌方法根据不同机器分配规则的选择概率确定所述机器分配规则。
5.如权利要求1所述的基于深度强化学习的多目标柔性作业车间调度方法,其特征在于,还包括:
将所述当前重调度时刻的生产线状态特征向量输入所述目标智能体的目标价值网络,得到所述当前重调度时刻的目标状态价值函数;
将所述当前重调度时刻的生产线状态特征向量和所述当前重调度时刻的调度目标输入所述工件智能体的工件价值网络,得到所述当前重调度时刻的工件状态价值函数;
将所述当前重调度时刻的生产线状态特征向量和所述当前重调度时刻的调度目标输入所述机器智能体的机器价值网络,得到所述当前重调度时刻的机器状态价值函数。
6.如权利要求1所述的基于深度强化学习的多目标柔性作业车间调度方法,其特征在于,所述当前重调度时刻为任意一道工序的完成时刻、或者,插单到达的时刻。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于清华大学,未经清华大学许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202010983212.1/1.html,转载请声明来源钻瓜专利网。
- 上一篇:一种豇豆病虫害防治的方法
- 下一篇:一种便于夹持的金属材料表面除锈装置
- 同类专利
- 专利分类
G06Q 专门适用于行政、商业、金融、管理、监督或预测目的的数据处理系统或方法;其他类目不包含的专门适用于行政、商业、金融、管理、监督或预测目的的处理系统或方法
G06Q10-00 行政;管理
G06Q10-02 .预定,例如用于门票、服务或事件的
G06Q10-04 .预测或优化,例如线性规划、“旅行商问题”或“下料问题”
G06Q10-06 .资源、工作流、人员或项目管理,例如组织、规划、调度或分配时间、人员或机器资源;企业规划;组织模型
G06Q10-08 .物流,例如仓储、装货、配送或运输;存货或库存管理,例如订货、采购或平衡订单
G06Q10-10 .办公自动化,例如电子邮件或群件的计算机辅助管理