[发明专利]基于DQN的不确定车间环境下物料配送实时优化方法有效
| 申请号： | 202110439428.6 | 申请日： | 2021-04-23 |
| 公开（公告）号： | CN113128770B | 公开（公告）日： | 2022-08-09 |
| 发明（设计）人： | 袁逸萍;任年鲁;巴智勇;熊攀 | 申请（专利权）人： | 新疆大学 |
| 主分类号： | G06Q10/04 | 分类号： | G06Q10/04;G06Q10/08;G06K9/62;G06N3/00;G06N3/04;G06N3/08 |
| 代理公司： | 南京天华专利代理有限责任公司 32218 | 代理人： | 肖丽 |
| 地址： | 830001 新疆维吾*** | 国省代码： | 新疆;65 |
| 权利要求书： | 查看更多 | 说明书： | 查看更多 |
| 摘要： | 本发明公开了一种基于DQN的不确定车间环境下物料配送实时优化方法，包括以下步骤：对不确定车间环境进行建模，建立物料需求动态时间窗方程及路径实时路阻系数方程；将不确定车间环境下物料配送实时决策优化问题转化为半马尔科夫决策问题，设计状态空间、全局动作空间、局部动作空间和奖励函数等关键模型要素；使用全连接神经网络来设计DQN的两个Q网络；DQN不断与环境交互进行试错学习直到Q值网络训练稳定；将实时感知到的车间关键状态数据和环境模型计算得到的扰动数据传输到训练稳定的DQN中；DQN计算出当前状态下的最佳的安全动作，然后传输给AGV，指导AGV在不确定车间环境下实时响应扰动并做出合适的动作选择，以较小的成本快速完成物料配送任务。 | ||
| 搜索关键词： | 基于 dqn 不确定 车间 环境 物料 配送 实时 优化 方法 | ||
【主权项】：
暂无信息
下载完整专利技术内容需要扣除积分，VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息，商用须获得专利权人授权。该专利全部权利属于新疆大学，未经新疆大学许可，擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作，请联系【客服】
本文链接：http://www.vipzhuanli.com/patent/202110439428.6/，转载请声明来源钻瓜专利网。
- 同类专利
- 专利分类
G06 计算；推算；计数
G06Q 专门适用于行政、商业、金融、管理、监督或预测目的的数据处理系统或方法；其他类目不包含的专门适用于行政、商业、金融、管理、监督或预测目的的处理系统或方法
G06Q10-00 行政；管理
G06Q10-02 .预定，例如用于门票、服务或事件的
G06Q10-04 .预测或优化，例如线性规划、“旅行商问题”或“下料问题”
G06Q10-06 .资源、工作流、人员或项目管理，例如组织、规划、调度或分配时间、人员或机器资源；企业规划；组织模型
G06Q10-08 .物流，例如仓储、装货、配送或运输；存货或库存管理，例如订货、采购或平衡订单
G06Q10-10 .办公自动化，例如电子邮件或群件的计算机辅助管理
G06Q 专门适用于行政、商业、金融、管理、监督或预测目的的数据处理系统或方法；其他类目不包含的专门适用于行政、商业、金融、管理、监督或预测目的的处理系统或方法
G06Q10-00 行政；管理
G06Q10-02 .预定，例如用于门票、服务或事件的
G06Q10-04 .预测或优化，例如线性规划、“旅行商问题”或“下料问题”
G06Q10-06 .资源、工作流、人员或项目管理，例如组织、规划、调度或分配时间、人员或机器资源；企业规划；组织模型
G06Q10-08 .物流，例如仓储、装货、配送或运输；存货或库存管理，例如订货、采购或平衡订单
G06Q10-10 .办公自动化，例如电子邮件或群件的计算机辅助管理
