[发明专利]一种互联电网CPS指令动态分配优化方法

权利要求书

1.一种互联电网CPS指令动态分配优化方法，其特征在于，包括以下步骤：

步骤1、确定控制目标；

步骤2、确定状态离散集S；

步骤3、选择一类机组为平衡机组，其他机组参与CEQ(λ)协同学习，同时确定联合动作离散集A；

步骤4、在每个控制周期开始时采集所控制区域电网的实时运行数据，所述实时运行数据包括频率偏差Δf、功率偏差ΔP和各台机组的实际调节出力ΔP_Gi，计算该区域控制误差ACE(k)的瞬时值与控制性能标准CPS(k)的瞬时值；

步骤5、由当前状态s，获得机组i的立即奖励值R_i(k)；

步骤6、由线性均衡约束Σa-i∈A-iπs(a)Qi(s,a)≥Σa-i∈A-iπs(a)Qi(s,(a-i,ai′))]]>和均衡选择函数求取相关均衡最优联动策略π_s^*；

其中,A_-i=∏_j≠iA_j，A_i为智能体i的动作集合，s为当前状态，a_i为智能体i的动作，-i表示除智能体i以外其他智能体的集合，π为均衡策略，Q_i(s,a)为智能体i的状态-动作值函数；

步骤7、对所有学习机组j，更新所有状态-动作对的状态-动作值函数值和资格迹矩阵并由更新的Q值求取当前状态s下的随机最优均衡联动策略再由选择各机组协作动作，更新状态s和动作a；

步骤8、在下一次控制周期到来时，返回步骤4。

2.如权利要求1所述的互联电网CPS指令动态分配优化方法，其特征在于，所述步骤1中的控制目标选择区域控制误差ACE最小、发电成本最低或控制性能指标CPS最高。

3.如权利要求1所述的互联电网CPS指令动态分配优化方法，其特征在于，所述步骤2中的状态离散集S具体可以通过所控制区域电网的区域控制误差ACE(k)、控制性能指标CPS(k)值以及其各机组的功率偏差值|ΔP_error-i|的范围划分来确定。

4.如权利要求1所述的互联电网CPS指令动态分配优化方法，其特征在于，所述步骤3中的平衡机组选用燃煤机组，而选用水电和液化天然气等调节容量上下限较小但时延性较小、调节速率较高、调节费用较小的机组参与均衡学习。