[发明专利]基于深度Q学习的航空发动机控制装置

权利要求书

1.一种基于深度Q学习的航空发动机控制装置，其特征在于，包括：

加速和减速限制模块，用于输出航空发动机所有运行限制的物理限制值c_lim；

深度Q学习控制器，用于根据控制指令和反馈参数以及所述航空发动机所有 运行限制的物理限制值，通过深度Q学习方法得到航空发动机的燃油流量，并按照所得到的燃油流量对航空发动机的燃油输入进行控制；所述深度Q学习方法的动作值函数Q_j(s,a)具体如下：

其中，s是发动机状态，a是发动机的控制指令，α是深度学习的学习率,r是回报值,γ是回报衰减率,s_j是第j时刻发动机状态，s_t是发动机目标状态；第j时刻的回报值r_j具体如下：

其中，表示控制目标的测量值，u是控制变量向量，β>0，c是发动机所有运行限制的测量值，c_lim是发动机所有运行限制的物理限制值，Q和R是对称的正定矩阵。

2.如权利要求1所述航空发动机控制装置，其特征在于，所述航空发动机各参数包括：燃油流量、风扇喘振裕度、压气机喘振裕度、风扇转子转速、压气机转子转速、高压涡轮进口温度。

3.如权利要求1所述航空发动机控制装置，其特征在于，所述深度Q学习控制器中的深度神经网络为在线滑动窗口深度神经网络。

4.如权利要求1所述航空发动机控制装置，其特征在于，所述深度Q学习控制器中的深度神经网络，其输入为当前时刻和历史时刻的燃油流量以及历史时刻的风扇喘振裕度、压气机喘振裕度、风扇转子转速、压气机转子转速、高压涡轮进口温度，其输出为动作值函数。