[发明专利]机器学习装置、控制系统、控制装置以及机器学习方法

摘要

本发明涉及机器学习装置、控制系统、控制装置以及机器学习方法。该机器学习装置针对控制主轴电动机与进给轴电动机之间的同步运行的机床的控制装置进行机器学习，具备：状态信息取得部，其通过使控制装置执行攻丝程序，从控制装置取得包括针对主轴电动机的转矩指令值、包括减速的驱动状态、加速时移动距离和减速时移动距离之间的比率的状态信息；行为信息输出部，其将包括加速时移动距离和减速时移动距离之间的比率的调整信息的行为信息输出给控制装置；回报输出部，其输出基于减速时的转矩指令值和减速时的目标转矩指令值的强化学习的回报的值及价值函数更新部，其根据回报输出部输出的回报的值、状态信息和行为信息来更新行为价值函数。

主权项

1.一种机器学习装置，针对控制主轴电动机与进给轴电动机之间的同步运行的机床的控制装置进行机器学习，其特征在于，该机器学习装置具备：状态信息取得部，其通过使上述控制装置执行攻丝程序，从上述控制装置取得至少包括针对上述主轴电动机的转矩指令值、包含上述主轴电动机的减速的驱动状态、上述主轴电动机的加速时移动距离与减速时移动距离之间的比率的状态信息；行为信息输出部，其将包括上述状态信息中包含的上述主轴电动机的加速时移动距离与减速时移动距离之间的上述比率的调整信息的行为信息输出给上述控制装置；回报输出部，其输出基于上述状态信息中包含的减速时的转矩指令值和减速时的目标转矩指令值的强化学习的回报的值；以及价值函数更新部，其根据由上述回报输出部输出的回报的值、上述状态信息和上述行为信息来更新行为价值函数。