[发明专利]一种基于值迭代的伺服电机智能优化控制方法

说明书

一种基于值迭代的伺服电机智能优化控制方法，初始化系统，确定系统能控；对系统进行采样，使用最小二乘法在线计算值函数进行策略评估，当取得最优值函数时使用贪心算法更新策略，最终得到最优策略。本发明通过值迭代的自适应控制，求解最优控制策略来实现对系统进行智能优化控制，与现有技术相比，在系统部分模型参数未知的情况下，不需要对系统进行辨识，而是基于值迭代的自适应控制方法，在线对系统实现最优控制。

技术领域

本发明属于控制技术领域，具体涉及一种基于值迭代的伺服电机智能优化控制方法，实 现系统模型未知情况下的伺服电机最优控制。

背景技术

在以往的控制问题中，对于求解连续线性时不变系统的最优控制问题，通常通过计算代 数Raccati方程的解，比如基于特征向量的算法和数值模拟方法，LQR方法，但所有这些方 法及其在数值上有优势的变量都是离线程序，已经被证明能收敛到所需的ARE解。它们要么 在与ARE(基于特征向量和矩阵符号的算法)相关的哈密顿矩阵上操作，要么需要求解 Lyapunov方程(牛顿法)。在所有情况下，都需要一个系统的模型，并且总是需要预先的识 别过程。然而在实际中，系统建模难度大，需要花费大量的时间和精力。此外，即使模型是 可用的，基于该模型得到的状态反馈控制器也仅对实际系统动力学的模型逼近是最优的。

当受控系统的全局模型未知时，考虑应用数据驱动控制理论和方法来解决实际的控制问 题。数据驱动思想是指利用受控系统的在线和离线数据，在不需要对模型完全已知的情况下 实现系统的基于数据的预报、评价、调度、监控、诊断、决策和优化等的各种期望功能，最 早来源于计算机科学领域，于近几年出现在控制领域，仍处于萌芽阶段。目前对于伺服电机 的控制研究，更多的是采用传统的基于模型的控制方法，未能利用数据驱动思想在线实现对 系统的控制，需要对模型的完全已知，这导致需要花费大量的时间建模，同时可能存在模型 不匹配、未建模动态等问题。

发明内容

为了克服现有方法存在不足，本发明提供一种基于值迭代的伺服电机智能优化控制方法， 该方法提出了一种基于自适应值迭代算法，将ADP和智能优化控制系统理论的概念结合起来， 提出了一种新的ADP技术，它能以时间向前的方式解决具有部分未知动力学(即系统矩阵A 指定的内部动力学)的线性系统的连续时间无限时域最优控制问题。根据测量控制器性能的 信号序列更新控制器参数，利用更新控制策略和值函数估计的迭代过程，以使它们更接近最 优控制策略和相应的最优值函数。每个迭代步骤包括基于当前控制策略的值函数估计值的更 新，然后基于新的值函数估计值更新控制策略。

本发明所考虑的具有物理特征的实体对象(网络化多轴运动控制系统)如图1所示，其 主要由上位机、ARM微处理器、AC伺服系统、伺服电机、电源及开关和CAN总线组成。算法 编程基于Visual Studio C++环境，Visual Studio是微软(Microsoft)为以Windows为主的平台开发的一套功能强大的IDE(集成开发环境)，支持C#、F#、VB、C/C++等多种语言 的开发。其中，上位机主要的工作是通过TCP/IP协议接收来自ARM微处理器的数据，并运行 内嵌的控制算法，随后发送控制指令至ARM微处理器。ARM微处理器作为数据的中转站，通 过CAN总线从伺服系统中获得伺服电机的速度、位置、力矩等信息，并将这些信息传输给上 位机，同时接收上位机的控制指令并将其下发至伺服系统。AC伺服系统具体型号为台达ASDA－A2系列的高性能通讯型伺服驱动器，其作用是实时响应PC机的控制指令，驱动伺服电机执行相应的动作，电源及开关则负责系统的上电断电。

本发明解决其技术问题所采用的技术方案是：

一种基于值迭代的伺服电机智能优化控制方法，包括以下步骤：

步骤1)建立一个电机系统状态空间方程如下：